Du trafic de production au post-entraînement : consolider une flotte de LLM auto-hébergés en un seul modèle

Face à la fragmentation d'un pool GPU fini par l'accumulation de modèles auto-hébergés, les auteurs consolident le trafic de plus de 200 applications sur un seul modèle. Ils entraînent un expert GRPO distinct par axe (instruction following, function-calling, tâches internes) pour éviter les interférences de récompense, puis les fusionnent par SLERP en deux étapes. Le modèle résultant dépasse une baseline 7x plus grosse sur plusieurs benchmarks tout en absorbant 50% du trafic de la plateforme, soit 116M requêtes par mois.