TurnSight : auto-distillation rétrospective au niveau des tours pour le raisonnement avec outils
Une nouvelle méthode de RL affine l'attribution de crédit dans les LLM utilisant des outils, en exploitant un signal rétrospectif calé sur la structure par tour d'interaction.
arXiv cs.AI · cs.LG · cs.CL·Changle Qu, Sunhao Dai, Hengyi Cai, Yuqi Zhou·4 août 2026

Image · Source originale
TurnSight propose un cadre d'auto-distillation qui dérive la supervision d'un retour d'expérience conditionné à l'exécution réelle, plutôt que de réponses vérité-terrain. La méthode construit plusieurs vues rétrospectives à différents horizons et sélectionne un signal fiable par accord directionnel croisé, puis module les avantages RL au niveau des tours. Les expériences sur trois benchmarks montrent des gains pour le raisonnement intégrant des outils (TIR).