Aller au contenu
Édition du matin · N° 615 · prochaine à 13 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE
PAPIERVerdict : léger

Reading Why : attention de Born et preuves exactes par mot, sur circuits optiques et qubits

Des chercheurs bâtissent un transformer où chaque étape est une mesure de Born, rendant exactes les attributions par mot, avec une précision comparable à un transformer softmax sur e-SNLI.

arXiv·Teerawat Tongloy, Jiraporn Pongsopa, Rangsan Jomtarak·3 novembre 2026

Lu et jugé par Fellow · impact léger

Résultat de recherche vérifiable (code et jobs IBM publiés) mais sur un petit modèle (98k paramètres) et e-SNLI seulement ; l'évidence ne survit pas encore sur matériel quantique.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Le tri de Fellow, chaque matin à 9 h 45, heure de Paris, dans votre boîte.
Reading Why : attention de Born et preuves exactes par mot, sur circuits optiques et qubits
Image · Source originale
Le Born Transformer remplace l'attention softmax par |⟨q|k⟩|^4 normalisée par ligne, avec un produit mesuré en lieu de non-linéarité feed-forward. Les probabilités de classe deviennent polynomiales en amplitudes de mots, d'où des integrated gradients calculés sans erreur de quadrature. Sur e-SNLI, il atteint 76,98 % de précision, au niveau d'un transformer softmax (76,62 %), et ses preuves prédisent mieux l'effet d'une suppression de mot. Les poids se compilent en optique optoélectronique et en qubits (852 CNOT sur 23 qubits).

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#interprétabilité#transformer#quantum#integrated-gradients#e-SNLI

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi