RECHERCHE
Verdict : légerLe langage aurait deux paramètres : plasticité sémantique narrative et interprétation sensible à la phase
Une thèse théorique propose un second paramètre linguistique, la phase, absent des transformers actuels et clé pour comprendre allusion, ironie et citation.
arXiv·Hollis Robbins·18 août 2026
Lu et jugé par Fellow · impact léger
Proposition théorique avec prédictions testables mais sans implémentation ni modèle livré.

Image · Source originale
L'article distingue amplitude (force d'association statistique, captée par embeddings et attention) et phase, un second paramètre relationnel qui détermine comment des significations coactivées se combinent, potentiellement en s'inversant. L'auteur soutient que le moyennage de population efface cette phase indexée à l'histoire individuelle, et que les transformers standards n'en ont pas de représentation explicite en inférence figée. Six prédictions testables sont proposées pour évaluer cette hypothèse, notamment sur la persistance d'un sens supprimé et l'effet de l'ordre des rencontres.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Abstention et filtrage du bruit : deux primitives manquantes de l'attention softmax18 septembre 2026
- Transition de phase des random features aux réseaux entièrement entraînables22 octobre 2026
- Votre Transformer est secrètement élastique14 octobre 2026
- Vers une provenance computationnelle : encoder l'état causal interne dans le texte généré17 août 2026
- Un cadre mathématique pour les circuits Transformer12 septembre 2026
- Décomposer l'évolution des représentations dans les Transformers par analyse directionnelle14 septembre 2026