DeepSeek publie en open source son moteur d'inférence DeepInfer
DeepSeek ouvre le code de DeepInfer, le framework d'inférence de ses services en production : kernels optimisés, parallélisme MoE, sampling déterministe et sorties structurées.
Lu et jugé par Fellow · impact notable
Code réel sous Apache 2.0 du moteur d'inférence de production DeepSeek (kernels, parallélisme MoE, batch-invariance), mais version partielle : sans KV cache, ni désagrégation Prefill/Decode.

Traduit et résumé par IA à partir de la page source ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Show HN : Capy-flash, un modèle MoE de 125 Md de paramètres sur deux GPU grand public de 16 Go16 octobre 2026
- Launch HN : Magnitude (YC S25), un moteur d'inférence auto-optimisant pour agents30 septembre 2026
- L'IA capable de concevoir son propre matériel d'inférence : le projet openTPU6 octobre 2026
- Quand utiliser la désagrégation encode-prefill-decode pour accélérer le serving de modèles multimodauxNVIDIA · 9 septembre 2026
- Guidez votre AI agent avec des repères visuels à l'écran9 septembre 2026
- Prime Agent : un harness open-source pour agents auto-améliorants à long horizon24 août 2026