DeepSeek har den 20. oktober 2026 gjort mere af sin inferenssoftware tilgængelig for andre. DeepInfer er den motor, virksomheden siger driver dens produktionstjenester, mens ledsagerkomponenten deepseek-recipe håndterer behandling af forespørgsler og tokens. Den vigtigste begrænsning er, at den offentlige udgivelse tilbyder offline-inferens – ikke en komplet, klar erstatning for DeepSeeks hostede API.
3
4
33
Hvad DeepInfer og deepseek-recipe gør
DeepInfer er et inferensframework: software, der kører en trænet model og genererer svar. Den første udgave understøtter DeepSeek-V4.1-Flash og udgives under Apache 2.0-licensen, ifølge omtalen af lanceringen.
4
5
Blandt funktionerne er distribueret inferens, optimerede kerner, spekulativ dekodning, asynkron planlægning, batch-invariant inferens og strukturerede svar.
33
34 Strukturerede svar gør det muligt at begrænse modellens output til bestemte formater, for eksempel et JSON-skema, et regulært udtryk eller en EBNF-grammatik.
29
30
deepseek-recipe er den tilhørende komponent, der omsætter forespørgsler til modelinput og konverterer modellens output tilbage til svar. Omtalen beskriver understøttelse af velkendte API-formater, men det dokumenterer ikke i sig selv fuld kompatibilitet med alle funktioner i DeepSeeks hostede API.
3
9
Understøttede modeller og chips
Ved lanceringen står DeepSeek-V4.1-Flash på listen over understøttede modeller. DeepInfer angiver også to acceleratorfamilier: NVIDIA SM100-GPU’er og Huawei Ascend 950-NPU’er.
3
5 Det er ikke dokumentation for, at alle NVIDIA-GPU’er eller Huawei-acceleratorer kan bruges, og de tilgængelige kilder fastslår ikke, hvilke konkrete kortvarianter der understøttes.
Hvad løfterne om ydeevne betyder
DeepSeek præsenterer DeepInfer som et højtydende framework. Bloomberg vurderer, at softwaren potentielt kan gøre det billigere og lettere for virksomheder at køre DeepSeeks modeller ved at udnytte computerressourcerne mere effektivt.
33
45 Det er mulige fordele – ikke en garanti for lavere driftsomkostninger, energiforbrug eller svartid eller for en bestemt kapacitet i enhver opsætning.
Et tal på 155 billioner tokens om dagen pr. klynge er blevet omtalt som DeepSeeks oplysning, men den tilgængelige dækning bekræfter det ikke uafhængigt og giver ikke tilstrækkelige detaljer til en direkte sammenligning med andre systemer.
1
5 The Next Web skriver ligeledes, at DeepSeeks hastighedstal ikke er blevet testet uafhængigt.
49
Derfor er DeepInfer ikke en færdig onlinetjeneste
Den offentlige udgave leverer offline-inferens. Omtalen af udrulningsdokumentationen peger desuden på flere dele til drift af en tjeneste, som ikke følger med: håndtering af KV-cache, opdeling af arbejdet mellem promptbehandling og generering af tokens (prefill/decode-disaggregering) samt belastningsfordeling mellem flere kopier af modellen.
4
7
Virksomheder, der vil tilbyde en tjeneste til mange brugere, skal derfor selv stå for yderligere driftsinfrastruktur. DeepInfer passer umiddelbart bedre til organisationer med erfaring i inferenssystemer end til teams, der leder efter en færdig hostingtjeneste. Om selvhosting bliver billigere, afhænger af den nødvendige hardware og driftsindsats; udgivelsen alene dokumenterer ikke de samlede omkostninger.
Kort fortalt
DeepInfer åbner for adgang til en inferensmotor, som DeepSeek bruger i produktion, men som foreløbig kun understøtter DeepSeek-V4.1-Flash. deepseek-recipe supplerer med behandling af forespørgsler og svar. Tilsammen giver værktøjerne infrastrukturfokuserede teams flere byggesten til selvhosting, men de bør skelne mellem de annoncerede optimeringer og uafhængigt målte resultater – og regne med ekstra arbejde for at gøre offline-inferens til en stabil onlinetjeneste.
3
4
33
49