Huawei kompaniyasi openPangu-2.0 modeli uchun oldindan oʻqitish (pretraining), nazoratli nozik sozlash (SFT) va kuchaytirish bilan oʻqitish (RL) jarayonlari uchun manba kodni ochdi. TMT Post maʼlumotlariga koʻra va Ascend uchun optimallashtirilgan oʻquv toʻplami haqidagi yoritishga koʻra, bu nashr 2026-yil 28-sentabrda amalga oshirildi.
Rasmiy brendlash Huawei / openPangu sifatida ishlatiladi. Avvalroq openPangu-2.0-Pro va openPangu-2.0-Flash modellari Ascend uchun optimallashtirilgan oʻquv toʻplamining asosini tashkil etuvchi ushbu yangi nashrdan avval Hugging Face platformasida chiqarilgan edi; ammo joriy nashr aynan ushbu MoE modellarining oʻquv kod yoʻlini qamrab oladi, ular Ascend ustida oʻqitilgan, yangi parametrlar emas.
Hugging Faceʼdagi model kartochkalari openPangu ni Huawei tomonidan yaratilgan sunʼiy intellektning ochiq modellari brendi sifatida taʼriflaydi, u Ascend ustida oʻqitish va inferens uchun moʻljallangan. openPangu-2.0-Pro modeli taxminan 505 milliard umumiy parametr, token boʻyicha taxminan 18 milliard faol parametr, 512K kontekst oynasi va taxminan 34 trilyon token oʻquv byudjeti bilan taqdim etilgan. openPangu-2.0-Flash modeli esa taxminan 92 milliard umumiy parametr, taxminan 6 milliard faol parametr, bir xil 512K kontekst hajmi va taxminan 34 trilyon token ga teng byudjetga ega.
Ikkala modelni oʻqitishdan keyingi qoʻshimcha maʼlumotlarda birlashtirilgan tez/sekin SFT, koʻp mutaxassis RL va onlayn destillatsiya (OPD) tilga olinadi. Pro va Flash uchun umumiy arxitektura xususiyatlariga koʻp boshli latent diqqat, DSA-plus-SWA qatlamli aralashma (taxminan 1:2), toʻrt shoxli mHC qoldiq topologiyasi, koʻp tokenlarni uch boshli bashorat qilish va Muon optimallashtiruvchisi yordamida oʻqitish kiradi.
28-sentabrdagi nashr pretrain, SFT va RL komponentlarini Ascend uchun maxsus vositalar sifatida taqdim etib, ishlab chiquvchilarga shunchaki inferens uchun vaznlarni yuklash oʻrniga, ushbu toʻplamni qayta tiklash va kengaytirish imkonini beradi. Ochiq vaznlar, inferens kodi va ushbu oʻquv kodi toʻplamini ajratib koʻrsatish muhim: vaznlar allaqachon ommaviy foydalanish uchun mavjud edi; yangilik shundaki, Huawei openPangu-2.0 ning pretrain/SFT/RL komponentlari orqali Ascend tomonida oʻquv yoʻlini ochmoqda.
Ascendda ishlaydigan jamoalar uchun aniq natija — bu Pro (505B / ~18B faol, 512K) va Flash (92B / ~6B faol, 512K) model oilasiga mos keladigan OSS oʻquv toʻplamidir.
