RECHERCHE
L'interaction prompt-modèle atteint des points fixes : une lecture structurelle déterministe et indépendante de la tâche
Une étude montre que l'effet d'un prompt dépend de la structure interne du modèle, mais qu'aucun facteur explicatif testé ne parvient à en rendre compte.
arXiv cs.AI · cs.LG · cs.CL·Nicolás Vera Zúñiga·21 août 2026
Lu et jugé par Fellow · impact léger
Étude exploratoire mono-auteur sur un phénomène structurel sans lien établi avec la performance en tâche.
Image · Source originale
L'article examine la structure des points fixes de la carte argmax à court terme entre prompt et modèle, sans tâche associée. Neuf tokens de contexte suffisent à déplacer largement cette structure et à reclasser les modèles, alors que l'instruction tuning n'a aucun effet mesurable. Plusieurs hypothèses explicatives (longueur de préfixe, style prose/markup, attention-sink) sont testées puis invalidées faute de robustesse statistique.
Chaleur 0
Pertinence 45
Nouveauté 70