RECHERCHE
RP-OPSD : self-distillation guidée pour le raisonnement multilingue
Une méthode de self-distillation on-policy qui se concentre sur les pivots de raisonnement pour améliorer le transfert de compétences multilingue des LLM.
arXiv·Xinye Wang, Junxiao Liu, Shujian Huang·6 août 2026

Image · Source originale
RP-OPSD est une méthode de self-distillation qui cible les « pivots de raisonnement », des décisions clés orientant le processus d'inférence, plutôt que le texte de surface. Exploitant le décalage distributionnel avec des solutions de référence en anglais, elle priorise la supervision sur les tokens de contrôle du raisonnement. Les expériences sur des benchmarks mathématiques en 17 langues démontrent sa supériorité par rapport aux approches existantes.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Conscience d'évaluation hors anglais : les LLM réagissent-ils différemment lorsqu'ils sont testés en langues indiennes ?15 octobre 2026
- Au-delà de la langue : améliorer les embeddings multilingues sans entraînement par suppression de sous-espaces de résidus appariés16 octobre 2026
- Comment faire exprimer à des LLM de type Système 1 des compétences de Système 2 ?16 octobre 2026
- LLM et autoréférentialité : Scott Aaronson explore les limites réflexives des modèles2 septembre 2026
- ConvMem : une mémoire convolutionnelle pour le raisonnement en contexte long9 septembre 2026
- DiscoSign : traduction de texte vers gloses en langue des signes sensible au discours2 septembre 2026