openPangu 2.0 Pro má přibližně 505 miliard parametrů, ale na jeden token aktivuje zhruba 18 miliard; nejde o 180 miliard aktivních parametrů. Uvolněné váhy, základní inferenční kód a technická zpráva umožňují model zkoumat a nasazovat na platformě Ascend, nikoli automaticky zopakovat jeho původní trénink na 34 bilio...
Research answer

Create a landscape editorial hero image for this Studio Global article: How does Huawei’s open-sourcing of openPangu-2.0-Pro—a 505B-parameter MoE model with roughly 180B active parameters, 512K context, 34T-token. Article summary: One correction: openPangu-2.0-Pro has about 505B total parameters but roughly 18B—not 180B—activated per token. The release is significant because it makes an Ascend-native, non-NVIDIA path inspectable from model design . Topic tags: general, general web, documentation. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks, charts with fak
Huawei vydal openPangu-2.0-Pro jako více než jen samotný checkpoint. Uvolnění přináší podstatný základ pro kontrolu a provoz velkého modelu na akcelerátorech Ascend. Neznamená však, že si dnes libovolná externí organizace může celý původní trénink ve frontierovém měřítku jednoduše zopakovat.
Nejdřív je dobré opravit často uváděné číslo: Pro je model typu mixture of experts (MoE) s přibližně 505 miliardami parametrů celkem, přičemž pro každý token aktivuje zhruba 18 miliard parametrů. Podporuje kontext o délce 512 tisíc tokenů a podle modelové karty byl předtrénován na přibližně 34 bilionech tokenů. 21
Huawei 31. července 2026 oznámil zveřejnění vah openPangu-2.0-Pro, základního inferenčního kódu a technické zprávy. Související komponenty openPangu 2.0 mají postupně přibývat v jeho open-source kanálech. 12
Každá z těchto položek má jiný praktický význam:
Plán oznámený na konferenci HDC 2026 počítal s postupným otevřením sedmi komponent, mimo jiné kódu pro předtrénování, post-trénování a tréninkových operátorů. 2
10 Pokud budou vydány v prakticky použitelném stavu, přiblíží projekt mnohem víc kompletnímu řetězci od tréninku po inferenci než vydání, která nabízejí jen váhy.
Otevřené váhy nejsou totéž co reprodukovatelný trénink. Stažení checkpointu umožní testovat konkrétní vydaný model, samo o sobě ale neodhalí všechny podmínky potřebné k tomu, aby vznikl znovu.
Zopakování předtrénování na 34 bilionech tokenů by vyžadovalo přinejmenším přesná data, případně reprodukovatelný postup jejich tvorby; kompletní implementaci tréninku i post-trénování; hyperparametry; topologii clusteru; verze softwaru a kompilátorů; nastavení distribuovaného tréninku; vlastní operátory; metodiku evaluace a dostatek kompatibilního hardwaru. Dosud zveřejněné materiály potvrzují váhy, základní inferenční kód a zprávu, zatímco další části Huawei popisuje jako postupně vydávané. 12
21
Přesnější současná charakteristika tedy zní: otevřený model orientovaný především na Ascend, se zveřejněnou cestou k větší transparentnosti celého stacku. Není to ještě důkaz, že nezávislý tým dokáže původní trénink hned dnes reprodukovat.
openPangu-2.0-Pro kombinuje velmi vysoký celkový počet parametrů s postupy, které mají omezit náklady generování a zpracování dlouhého kontextu.
U MoE modelů se jednotlivé tokeny směrují jen do části expertních parametrů. Modelová karta Pro uvádí přibližně 505 miliard parametrů celkem a asi 18 miliard aktivních parametrů na token. 21
Model tím není „lehký“: už samotné uložení, obsluha a komunikace kolem 505miliardového modelu vyžadují značnou infrastrukturu. Oproti hustému modelu stejné celkové velikosti ale může výpočet na jeden token zahrnovat menší podíl parametrů.
Model ponechává MLA a kombinuje DSA s pozorností posuvného okna, tedy SWA, v poměru vrstev 1:2. Huawei uvádí, že vrstvy SWA modelují lokální okno, zatímco DSA zachycuje řídký globální kontext. Cílem má být nižší výpočetní náročnost, paměťové nároky a náklady na přístup do paměti při dlouhém kontextu bez ztráty přesnosti. 21
Jde o přímou odpověď na problém 512K kontextu: plná pozornost mezi všemi tokeny rychle zdražuje. Lokální mechanismus levně řeší blízké souvislosti, zatímco řídké globální vazby se mají dostat i ke vzdáleným relevantním informacím.
Huawei dále popisuje čtyřproudou reziduální topologii mHC, která má zvýšit rozmanitost reprezentací a schopnost generalizace. Tříhlavý modul pro predikci více tokenů předpovídá další budoucí tokeny a má urychlit inferenci. Jako tréninkový optimalizátor je uveden Muon, jehož deklarovaným cílem je rychlejší konvergence. 21
Jsou to tvrzení z materiálů Huawei, nikoli nezávislé potvrzení stejného zrychlení v každém nasazení. Propustnost i odezva závisí mimo jiné na konfiguraci akcelerátorů, přesnosti výpočtů, dávkování, délce kontextu, charakteru provozu a obslužném softwaru.
Okno o 512 tisících tokenech může agentovi umožnit pracovat v jedné relaci s podstatně větším objemem podkladů: například s manuály, předpisy, protokoly, předchozími výstupy nástrojů či technickými specifikacemi. Snižuje to potřebu agresivního dělení dokumentů, nenahrazuje však vyhledávání, řízení oprávnění, ověřování zdrojů ani lidské schválení.
Potenciální využití zahrnuje:
Pro řadu menších organizací bude Pro navzdory řídké aktivaci obtížné provozovat vlastními silami. Huawei vydal také menší variantu openPangu-2.0-Flash, která má 92 miliard parametrů celkem a 6 miliard aktivních parametrů na token; pro testování a nasazení může být dostupnější. 15
20
Huawei u verze Thinking uvádí skóre 68,5 v benchmarku SWE-bench Verified. 24 Je to pozoruhodný výsledek, ale nelze jej číst jako důkaz, že model dokáže spolehlivě samostatně převzít komplexní práci na produkčním softwaru.
Skutečné repozitáře závisejí na konfiguraci prostředí, závislostech, spouštění testů, bezpečnostní kontrole, architektonických rozhodnutích, měnících se produktových požadavcích a dlouhodobém ladění. Rozumný způsob nasazení proto představuje asistovaný programovací agent s přístupem omezeným na daný repozitář, izolovaným spouštěním, automatizovanými testy, statickou analýzou, code review a možností návratu změn — nikoli autonomní slučování změn.
Strategická hodnota nespočívá jen ve vahách modelu. Referenční model přizpůsobený Ascendu může vývojáře přivést k tomu, aby na Ascendu stavěli, testovali a optimalizovali své AI úlohy. Tyto úlohy následně vytvářejí poptávku po kvalitnějších runtimech, operátorech, nástrojích a spravovaných službách.
Huawei výslovně odkazuje vývojáře, podnikové partnery a výzkumníky na komunitu Ascend Tribe a nabídku Huawei Cloud MaaS, tedy model jako služba, pro stažení, používání a zpětnou vazbu. 12 Vydání Flash a Pro v rozdílných velikostech rozšiřuje okruh možných uživatelů, zatímco plánované tréninkové, post-tréninkové a operátorové komponenty míří na softwarové vrstvy, které rozhodují o praktické použitelnosti hardwarové platformy pro tvůrce modelů.
10
15
openPangu 2.0 je proto vhodnější chápat jako snahu posílit vývojový ekosystém Ascend plus Pangu. Otevřenost už dnes má reálnou hodnotu pro nasazení, kontrolu a experimentování. O tom, zda bude možné hovořit o plné reprodukovatelnosti, ale rozhodne teprve zveřejnění zbývajícího kódu, konfigurací a detailů kolem dat — a také nezávislé pokusy zjistit, co lze skutečně znovu postavit.
Studio Global AI
This page includes a source-backed answer you can continue inside Studio Global.
openPangu 2.0 Pro má přibližně 505 miliard parametrů, ale na jeden token aktivuje zhruba 18 miliard; nejde o 180 miliard aktivních parametrů.
openPangu 2.0 Pro má přibližně 505 miliard parametrů, ale na jeden token aktivuje zhruba 18 miliard; nejde o 180 miliard aktivních parametrů. Uvolněné váhy, základní inferenční kód a technická zpráva umožňují model zkoumat a nasazovat na platformě Ascend, nikoli automaticky zopakovat jeho původní trénink na 34 bilionech tokenů.
Kombinace MoE, DSA+SWA pozornosti, čtyřproudé mHC reziduální topologie, tříhlavé predikce více tokenů a optimalizátoru Muon míří na efektivnější dlouhý kontext a inferenci.