RECHERCHE
PAPIERVerdict : légerL'interaction prompt-modèle atteint des points fixes : une lecture structurelle déterministe et indépendante de la tâche
Une étude montre que l'effet d'un prompt dépend de la structure interne du modèle, mais qu'aucun facteur explicatif testé ne parvient à en rendre compte.
arXiv·Nicolás Vera Zúñiga·21 août 2026
Lu et jugé par Fellow · impact léger
Étude exploratoire mono-auteur sur un phénomène structurel sans lien établi avec la performance en tâche.

Image · Source originale
L'article examine la structure des points fixes de la carte argmax à court terme entre prompt et modèle, sans tâche associée. Neuf tokens de contexte suffisent à déplacer largement cette structure et à reclasser les modèles, alors que l'instruction tuning n'a aucun effet mesurable. Plusieurs hypothèses explicatives (longueur de préfixe, style prose/markup, attention-sink) sont testées puis invalidées faute de robustesse statistique.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Les modèles de base peuvent raisonner en s'appuyant sur des indices issus des données d'entraînement5 octobre 2026
- Écrire comme en 1866 : les LLM redécouvrent le style télégraphique7 octobre 2026
- « Nous regardions le problème à l'envers » : l'affirmation explosive qui secoue le monde de l'IA19 octobre 2026
- Les LLM représentent l'automutilation19 septembre 2026
- Show HN : un outil de visualisation de l'attention des LLM8 septembre 2026
- Un modèle IA mélange langage poétique et jargon tech16 septembre 2026