RECHERCHE
PAPIERVerdict : légerAu-delà de la réponse : construction de traces conditionnée par l'élève pour la distillation du raisonnement
ReDiST construit des traces de raisonnement adaptées à l'élève cible, puis les distille, avec de meilleures performances que la supervision par la seule réponse sur des benchmarks de QA.
arXiv·Shaoang Li, Yanhang Shi, Yufei Li, Mingfu Liang·16 octobre 2026
Lu et jugé par Fellow · impact léger
Méthode de distillation de traces de raisonnement testée sur des benchmarks de QA, sans chiffres précis dans le résumé ni évaluation indépendante ; portée limitée au cadre de recherche.

Image · Source originale
Les auteurs présentent ReDiST, un cadre de construction de traces et de distillation conditionné par l'élève pour le raisonnement appuyé sur des preuves. À partir des tentatives de l'élève, les brouillons corrects sont révisés et les échecs corrigés à l'aide de la réponse vérifiée ; un lecteur figé sélectionne les candidats. Sur des benchmarks de question-réponse, ReDiST améliore les performances sur la tâche source et en transfert par rapport aux références évaluées. Les classements diffèrent entre source et transfert.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
À lire aussi
- Distillation on-policy pour le raisonnement en très basse quantification22 septembre 2026
- Affiner sans recherche : distillation on-policy d'une distribution de puissance au niveau des séquences5 octobre 2026
- Des modèles de langage qui jouent aux échecs et expliquent leurs coups2 octobre 2026
- Au-delà de la vraisemblance du teacher : distillation on-policy calibrée par groupe pour le raisonnement long-contexte19 août 2026
- Relay-OPD : une méthode de distillation on-policy qui corrige les trajectoires de raisonnement défaillantes28 juillet 2026
- β-OPSD : optimisation par politique et auto-distillation30 juillet 2026