RECHERCHE
PAPIERVerdict : légerLe post-training des LLM vu comme de la maintenance logicielle « brownfield »
Une perspective industrielle sur l'ingénierie des données de post-training, entre budgets contraints et gains mesurables sur des benchmarks de code.
arXiv·Gopi Krishnan Rajbahadur, Amir M. Ebrahimi, Boyuan Chen, Ahmed E. Hassan·31 août 2026
Lu et jugé par Fellow · impact léger
Étude de cas industrielle avec gains mesurés sur benchmarks de code, mais portée limitée à une méthodologie d'ingénierie interne non généralisée.

Image · Source originale
Les auteurs comparent le post-training industriel des LLM à une maintenance de type brownfield : on part d'un checkpoint déployé et on applique des patches de mixture bornés, sans réentraînement complet. Une étude de cas sur l'amélioration de la génération de code montre qu'optimiser le rendement de la distillation augmente la supervision exploitable de 2,84x et améliore le pass@1 CodeForces de +2,59 points et LiveCodeBench v6 de +6,11 points, sans régression sur AIME et MATH.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Affiner sans recherche : distillation on-policy d'une distribution de puissance au niveau des séquences5 octobre 2026
- Prédire la performance des agents de code post-entraînés à partir des modèles de base7 octobre 2026
- Couplages comportementaux : de leur formation à l'émergence de comportements dans les modèles de langage16 octobre 2026
- Kimi-K2.7-Code : le nouveau modèle de code de Moonshot AIMoonshot AI · 12 septembre 2026
- Faire co-évoluer harness et modèle : la correction on-policy aide les modèles faibles à combler leur retard8 septembre 2026
- Le mixage de données améliore le raisonnement multilingue9 septembre 2026