DeepSeek vừa mở mã nguồn thêm một phần mềm quan trọng phía sau dịch vụ AI của mình. Công bố ngày 20/10/2026 gồm DeepInfer, công cụ suy luận mà công ty cho biết đang dùng trong các dịch vụ thực tế, và deepseek-recipe, thành phần hỗ trợ xử lý yêu cầu cũng như chuyển đổi token.
3
4
33
Điểm cần lưu ý với doanh nghiệp: đây là thêm bộ công cụ để tự vận hành mô hình, không phải một dịch vụ thay thế API của DeepSeek có thể đưa vào sử dụng ngay. Bản phát hành công khai hiện cung cấp suy luận ngoại tuyến; để phục vụ người dùng trực tuyến, các nhóm triển khai còn phải lo thêm hạ tầng.
3
4
DeepInfer và deepseek-recipe làm nhiệm vụ gì?
DeepInfer là khung suy luận — phần mềm dùng để chạy một mô hình đã được huấn luyện và tạo câu trả lời. Phiên bản ban đầu hỗ trợ DeepSeek-V4.1-Flash và được phát hành theo giấy phép Apache 2.0.
4
5
Danh sách tính năng của khung này gồm suy luận phân tán, các kernel được tối ưu, giải mã suy đoán, lập lịch bất đồng bộ, suy luận bất biến theo lô và đầu ra có cấu trúc.
33
34 Tính năng đầu ra có cấu trúc có thể giới hạn phản hồi theo định dạng như JSON Schema, biểu thức chính quy hoặc ngữ pháp EBNF — hữu ích khi ứng dụng cần nhận dữ liệu theo khuôn dạng định sẵn.
29
30
deepseek-recipe là thành phần đi kèm, giúp chuyển đổi yêu cầu thành đầu vào cho mô hình rồi xử lý đầu ra thành phản hồi. Các bài viết về bản phát hành mô tả thư viện này hỗ trợ những định dạng yêu cầu API quen thuộc; tuy nhiên, điều đó chưa chứng minh mọi hành vi của API DeepSeek đều tương thích đầy đủ.
3
9
Chỉ hỗ trợ một mô hình và hai dòng phần cứng
Ở thời điểm ra mắt, DeepInfer liệt kê DeepSeek-V4.1-Flash là mô hình được hỗ trợ, cùng hai loại bộ tăng tốc: GPU NVIDIA SM100 và NPU Huawei Ascend 950.
3
5 Danh sách này không đồng nghĩa với việc mọi GPU NVIDIA hay bộ tăng tốc Huawei đều chạy được; các nguồn hiện có cũng chưa xác nhận cụ thể từng biến thể bo mạch.
Tuyên bố hiệu năng chưa phải kết quả được kiểm chứng độc lập
DeepSeek giới thiệu DeepInfer là khung hiệu năng cao. Bloomberg nhận định phần mềm này có thể giúp doanh nghiệp vận hành mô hình của hãng với chi phí thấp hơn và dễ dàng hơn, nhờ tận dụng tài nguyên tính toán hiệu quả.
33
45 Đây là lợi ích kỳ vọng, không phải bảo đảm rằng mọi đơn vị triển khai đều sẽ giảm được chi phí, điện năng hay độ trễ đến một mức cụ thể.
Con số 155 nghìn tỷ token mỗi ngày trên một cụm máy của DeepSeek cũng được các bản tin nhắc đến. Tuy vậy, những thông tin hiện có chưa xác minh độc lập con số này, cũng chưa cung cấp đủ chi tiết để so sánh trực tiếp với các hệ thống khác.
1
5 The Next Web cho biết các số liệu tốc độ của DeepSeek chưa được bên ngoài kiểm nghiệm độc lập.
49
Vì sao chưa thể xem đây là dịch vụ trực tuyến trọn gói?
Bản phát hành công khai hiện hỗ trợ suy luận ngoại tuyến. Các bài viết về tài liệu triển khai cũng lưu ý một số thành phần phục vụ dịch vụ trực tuyến chưa được đóng gói kèm: quản lý bộ nhớ đệm KV, tách riêng giai đoạn xử lý đầu vào (prefill) với giai đoạn sinh token (decode), và cân bằng tải giữa các bản sao dịch vụ.
4
7
Vì vậy, nhóm muốn cung cấp dịch vụ trực tiếp cho nhiều người dùng sẽ phải tự xây dựng hoặc tích hợp thêm hạ tầng để xử lý các phần này. DeepInfer phù hợp tự nhiên hơn với các tổ chức có kinh nghiệm về kỹ thuật suy luận và vận hành cụm tăng tốc, thay vì những nhóm đang tìm một dịch vụ lưu trữ AI dùng ngay. Việc tự triển khai có tiết kiệm hay không còn tùy vào phần cứng và công sức vận hành; riêng bản phát hành chưa đủ để xác định chi phí đó.
Điều doanh nghiệp nên rút ra
DeepInfer mở quyền tiếp cận một khung suy luận hướng tới vận hành quy mô lớn cho DeepSeek-V4.1-Flash; deepseek-recipe bổ sung lớp xử lý yêu cầu và phản hồi. Đây là những cấu phần hữu ích hơn cho đội ngũ muốn tự lưu trữ mô hình, nhưng cần phân biệt tính năng được quảng bá với kết quả hiệu năng đã được đo đạc độc lập — đồng thời tính đến phần việc cần làm để biến suy luận ngoại tuyến thành một dịch vụ trực tuyến ổn định.
3
4
33
49