Aller au contenu
Édition du soir · N° 574 · prochaine à 9 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE

MISA-T : ordonnancer les rollouts RL mixtes au-delà de la localité de préfixe

Une nouvelle politique d'admission au niveau routage optimise le partage du cache KV entre RLVR, RLHF et rollouts agentiques lors du post-training des LLM.

arXiv·Zetao Hong, Song Yuan, Yuanhao Ding, Yibo Zhu·11 août 2026
MISA-T : ordonnancer les rollouts RL mixtes au-delà de la localité de préfixe
Image · Source originale
MISA-T combine admission adaptative des sessions, allocation de capacité KV sensible à la charge et comptabilité tenant compte du temps de résidence en cache. Sur Step3.7 et Qwen3.6-35B-A3B, la méthode améliore le débit de rollout de 53,3% et 43,6% par rapport à un routeur vLLM optimisé, tout en préservant un taux élevé de hits sur le cache de préfixe et le mélange de charge cible du trainer.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#reinforcement-learning#llm-serving#post-training#kv-cache#infrastructure

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi