RECHERCHE
PAPIERVerdict : légerConsolidation RLVR : paradigmes de fusion multi-domaines
Comparaison de Merge, Mix RL et MOPD pour fusionner des modèles experts sans perte de capacités.
arXiv·Siye Wu, Kai Yang, Yuchen Cai, Xin Xu·27 août 2026
Lu et jugé par Fellow · impact léger
Étude comparative empirique avec résultats chiffrés, mais portée incrémentale et non couverte ailleurs.

Image · Source originale
Cette étude compare trois paradigmes de fusion (Merge, Mix RL, MOPD) pour consolider des modèles entraînés par Reinforcement Learning with Verifiable Rewards (RLVR). Si les performances moyennes varient peu, les écarts peuvent atteindre 8,6 points selon le domaine. Les auteurs fournissent des directives pratiques : privilégier Merge pour une fusion économique, Mix RL pour l'entraînement unifié, et MOPD pour préserver les gains spécifiques.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- MFG : optimisation moléculaire guidée par feedback multi-tours13 octobre 2026
- Apprentissage par renforcement avec auto-distillation on-policy à attribution visuelle19 octobre 2026
- Deux horloges : pourquoi les gros batchs de rollouts apprennent plus lentement mais s'effondrent à date fixe en RLVR13 octobre 2026
- RetireOPD : auto-retraite pour distillation on-policy17 septembre 2026
- ASTRIL-MPC : guidage par langage et MPC pour robots chenillés11 septembre 2026
- Distillation LLM : une méthode pour corriger le biais du professeur sans feedback sur le domaine cible15 septembre 2026