Distillation
Fellow suit ce sujet depuis juin 2026 : 56 articles résumés en français, dont 15 jugés majeurs ou notables.
Toute l'actualité · 56 articles
La physique de la planification multi-tours à long horizon : du pré-entraînement au post-entraînement via distillation agentique
Une étude systématique en environnement contrôlé décortique comment les modèles acquièrent et affinent la capacité de planification longue durée.
X³-OPD : distillation de raisonnement pour modèles audio-langage
Un nouveau cadre transfère le raisonnement logique de modèles textuels vers des modèles audio via un alignement on-policy.
Moonshot aurait distillé Fable pour développer K3
Des informations suggèrent que le modèle K3 de Moonshot a été élaboré en distillant Fable, un LLM concurrent.
Bilan modèles ouverts : Kimi K3, Qwen et géopolitique
Analyse de l'essor des modèles chinois, de la distillation et des enjeux géopolitiques pour l'écosystème open-source.
Performances de modèles à 1 000 milliards de paramètres avec un agent MoE de 35 milliards
Agents-A1 démontre qu'élargir l'horizon agentic d'un modèle MoE 35B suffit à rivaliser avec des LLM mille fois plus grands.
Anthropic accuse Alibaba d'avoir extrait illicitement les capacités du modèle Claude
Anthropic affirme qu'Alibaba aurait contourné ses conditions d'utilisation pour extraire des capacités de son modèle Claude à des fins non autorisées.