RECHERCHE
Fixed-Point Reasoners : Transformers en boucle stables et adaptatifs
Des chercheurs proposent FPRM, un modèle Transformer en boucle qui adapte son calcul à la difficulté de la tâche grâce à la convergence en point fixe.
arXiv cs.AI · cs.LG · cs.CL·Sajad Movahedi, Vera Milovanović, Shlomo Libo Feigin, Alexander Theus·16 juin 2026
Image · Source originale
FPRM (Fixed-Point Reasoning Model) est une architecture Transformer en boucle qui utilise la convergence en point fixe comme mécanisme d'arrêt. Pour résoudre les problèmes de propagation du signal liés à la profondeur, les auteurs introduisent des couches pre-norm et un residual scaling. Le modèle adapte dynamiquement son budget de calcul à la complexité de chaque tâche et obtient de bons résultats sur Sudoku, labyrinthe, state-tracking et ARC-AGI.
Chaleur 8
Pertinence 72
Nouveauté 75