RECHERCHE
PAPIERVerdict : légerLatComm : compression de contexte réutilisable pour la communication latente entre grands modèles de langage
LatComm encode un contexte une seule fois en paquet de taille fixe, que le LLM récepteur lit par cross-attention pour chaque question, avec un gain de vitesse et d'accuracy.
arXiv·Huawei Lin, Jinting Liu, Tan Yu, Weijie Zhao·19 octobre 2026
Lu et jugé par Fellow · impact léger
Article de recherche en revue avec résultats chiffrés sur 12 jeux de QCM (jusqu'à +10,2 points, entrée réduite 57x, 3x plus rapide), mais sans code ni évaluation indépendante à ce stade.
Image · Source originale
LatComm est une interface de communication latente entre LLM qui sépare l'encodage de la lecture : un LLM encodeur gelé compresse le contexte, sans la question, en un paquet de taille fixe. Un LLM récepteur gelé, différent, le lit par cross-attention, avec des gates calculées à partir de son prompt. Sur 12 jeux de QCM, l'accuracy moyenne progresse jusqu'à 10,2 points face aux baselines à vecteur unique. Sur QuALITY, l'entrée du récepteur est réduite de 57x et les questions d'un article sont traitées 3x plus vite.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
#compression-de-contexte#communication-latente#multi-LLM#cross-attention
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.