Aller au contenu
Édition du soir · N° 574 · prochaine à 9 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE
PAPIERVerdict : léger

Allocation optimale du budget SFT-RL : de petits à grands LLM

Une méthode transposable détermine la répartition idéale des données SFT et RL sans recherche exhaustive.

arXiv·Jingtan Wang, Arun Verma, Xiaoqiang Lin, Zhengyuan Liu·1 septembre 2026

Lu et jugé par Fellow · impact léger

Étude méthodologique acceptée à EMNLP 2026, résultat empirique utile mais de portée limitée à l'allocation SFT-RL en post-training.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Allocation optimale du budget SFT-RL : de petits à grands LLM
Image · Source originale
Ce cadre définit la région quasi-optimale pour allouer un budget d'annotation entre SFT et RL lors du post-training. Expérimentalement, cette région s'élargit avec l'échelle du modèle et se transfère fiablement des petits modèles proxies aux grands modèles cibles.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#llm#sft#rlhf#post-training#scaling

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi