DeepSeek 20. října 2026 zpřístupnil další část softwaru, který používá k provozu svých služeb. DeepInfer je inferenční framework — tedy nástroj, který spouští natrénovaný model a vytváří jeho odpovědi. Doprovodný deepseek-recipe převádí požadavky a výstupy mezi formáty API a tokeny. Důležitý háček: zveřejněná verze nabízí offline inferenci, nikoli hotovou náhradu hostovaného API DeepSeeku.
3
4
33
Co DeepInfer firmám zpřístupňuje
DeepInfer při uvedení podporuje model DeepSeek-V4.1-Flash a je vydán pod licencí Apache 2.0.
4
5 Podle dokumentace zahrnuje distribuovanou inferenci, optimalizovaná výpočetní jádra, spekulativní dekódování, asynchronní plánování, inferenci invariantní vůči velikosti dávky a strukturované výstupy.
33
34
Strukturovaný výstup umožňuje omezit odpověď modelu na předepsaný formát, například podle schématu JSON, regulárního výrazu nebo gramatiky EBNF.
29
30 To může být užitečné pro aplikace, které potřebují spolehlivě zpracovat strojově čitelné odpovědi.
Deepseek-recipe obstarává převod požadavků do podoby, se kterou pracuje model, a následné zpracování výstupů. Zprávy uvádějí podporu známých formátů API; samy o sobě však nedokládají, že je knihovna ve všech ohledech plně kompatibilní s hostovaným API DeepSeeku.
3
9
Podporovaný model a hardware
Při uvedení DeepInfer uvádí jediný podporovaný model, DeepSeek-V4.1-Flash, a dvě rodiny akcelerátorů: GPU NVIDIA SM100 a NPU Huawei Ascend 950.
3
5 Tento seznam nepotvrzuje podporu všech GPU NVIDIA ani všech akcelerátorů Huawei; dostupné zdroje navíc neupřesňují jednotlivé varianty karet.
Co říkají výkonnostní údaje
DeepSeek popisuje DeepInfer jako vysoce výkonný framework. Podle Bloombergu by zveřejněný software mohl firmám usnadnit a zlevnit provoz modelů díky efektivnějšímu využití výpočetních zdrojů.
33
45 Jde ale o očekávaný přínos, nikoli o záruku nižších nákladů, spotřeby energie či latence v každém nasazení.
V médiích se objevuje také údaj DeepSeeku o 155 bilionech tokenů denně na jeden cluster. Dostupné zprávy jej nezávisle neověřují a neposkytují dost podrobností pro přímé srovnání s jinými systémy.
1
5 The Next Web rovněž upozorňuje, že údaje o rychlosti nebyly nezávisle otestovány.
49
Proč to ještě není služba připravená k nasazení
Veřejná verze poskytuje offline inferenci. V dokumentaci k nasazení navíc chybí několik částí potřebných pro provoz online služby: správa KV cache, oddělení zpracování vstupního promptu od generování tokenů (prefill/decode disaggregation) a rozdělování zátěže mezi repliky.
4
7
Týmy, které chtějí obsluhovat živé požadavky více uživatelů, si proto musí zajistit další provozní infrastrukturu samy. DeepInfer tak dává větší smysl organizacím se zkušenostmi s inferenční infrastrukturou než těm, které hledají hotový hosting. Zda vlastní provoz skutečně ušetří peníze, bude záležet na hardwaru i potřebné práci kolem nasazení; samotné zveřejnění tyto náklady nedokládá.
Praktický závěr
DeepSeek otevřel produkčně zaměřený inferenční framework pro DeepSeek-V4.1-Flash a přidal knihovnu deepseek-recipe pro zpracování požadavků a odpovědí. Pro infrastrukturní týmy jde o další stavební bloky k vlastnímu provozu modelu, ne však o hotovou online službu. Při posuzování přínosu je také dobré odlišovat deklarované optimalizace od nezávisle změřených výsledků.
3
4
33
49