RECHERCHE
PAPIERVerdict : légerAllocation optimale du budget SFT-RL : de petits à grands LLM
Une méthode transposable détermine la répartition idéale des données SFT et RL sans recherche exhaustive.
arXiv·Jingtan Wang, Arun Verma, Xiaoqiang Lin, Zhengyuan Liu·1 septembre 2026
Lu et jugé par Fellow · impact léger
Étude méthodologique acceptée à EMNLP 2026, résultat empirique utile mais de portée limitée à l'allocation SFT-RL en post-training.

Image · Source originale
Ce cadre définit la région quasi-optimale pour allouer un budget d'annotation entre SFT et RL lors du post-training. Expérimentalement, cette région s'élargit avec l'échelle du modèle et se transfère fiablement des petits modèles proxies aux grands modèles cibles.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Prédire la performance des agents de code post-entraînés à partir des modèles de base7 octobre 2026
- Hybrid Reasoning Agents : des agents alternant raisonnement latent et interaction textuelle13 octobre 2026
- Une famille de modèles, deux résultats niveau or : fine-tuning de Nemotron pour les Olympiades d'informatique et de mathématiquesHugging Face · 7 octobre 2026
- Les représentations internes des LLM révéleraient une structure symbolique implicite6 septembre 2026
- DeepSeek dévoile v4.1 Flash : une architecture encodeur-décodeur 763B12 septembre 2026
- La dernière IA construite par des humains : vers une véritable auto-amélioration récursive10 septembre 2026