Décodage métacognitif : une inférence efficace pour les agents à modèles de langage par diffusion

Les auteurs introduisent un contrôleur métacognitif, plug-in léger pour un backbone de diffusion, qui apprend quand finaliser les tokens et quelle longueur donner à la génération. Il est entraîné sur des trajectoires d'agents pour équilibrer exactitude et coût de génération. Sur cinq benchmarks, il réduit les FLOPs d'inférence de 20,6 % en moyenne par rapport à la baseline la plus efficace, avec une précision compétitive. Des études d'ablation valident l'approche.