LongZero : renforcer le raisonnement long contexte des LLM à partir de zéro donnée
Des chercheurs proposent LongZero, une méthode où un LLM améliore seul son raisonnement sur contexte long, sans corpus externe ni modèle enseignant, via GRPO.
Lu et jugé par Fellow · impact léger
Méthode de RL sans données externes pour le long contexte, testée sur deux LLM et cinq benchmarks avec code publié, mais résultat d'un seul preprint non répliqué et sans chiffres précis.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- La « fuite de réflexion » dans l'apprentissage par renforcement des LLM16 octobre 2026
- Co-évolution de l'action et de la prévision pour les agents de langage14 octobre 2026
- Les modèles de base peuvent raisonner en s'appuyant sur des indices issus des données d'entraînement5 octobre 2026
- Apprentissage de l'allocation adaptative du calcul de test20 août 2026
- Cliff : apprentissage des récompenses par processus dès la première erreur2 septembre 2026
- TTPO : optimisation de politiques au temps de test27 août 2026