RECHERCHE
Value-of-Information pour le routing de mélanges LoRA
VI-MoLE optimise le routage dans les mélanges d'experts LoRA via l'allocation de valeur de l'information certifiée.
arXiv cs.AI · cs.LG · cs.CL·Tom Saliencro, Rohan Desai, Priya Nair, Maya Lindqvist·3 août 2026
Image · Source originale
Les routeurs dynamiques actuels activent des experts LoRA supplémentaires en cas d'incertitude, mais cela ne garantit pas une amélioration. VI-MoLE formule le routage comme une allocation certifiée de valeur de l'information, apprenant le risque contrefactuel résiduel pour optimiser le budget d'adaptateurs. Cette méthode distingue l'ambiguïté actuelle du risque récupérable et surpasse les routeurs MoE-LoRA classiques en précision et latence.
Chaleur 0
Pertinence 60
Nouveauté 75
#moe#lora#routing#uncertainty#arxiv