Aller au contenu
Édition du matin · N° 583 · prochaine à 13 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE
PAPIERVerdict : léger

Quantifier le « lissage » des affirmations par les agents de recherche LLM

Des chercheurs introduisent SmoothScore, un score au niveau des affirmations qui mesure à quel point les rapports des agents de deep research expriment des conclusions plus tranchées que leurs sources.

arXiv·Tiasa Singha Roy, Manya Wadhwa, Greg Durrett·26 octobre 2026

Lu et jugé par Fellow · impact léger

Métrique d'évaluation (SmoothScore) avec code et données publiés, testée sur 7 systèmes et 4 jeux de données ; apport méthodologique utile mais portée limitée à la recherche.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Le tri de Fellow, chaque matin à 9 h 45, heure de Paris, dans votre boîte.
Quantifier le « lissage » des affirmations par les agents de recherche LLM
Image · Source originale
Les auteurs montrent que les rapports longs produits par des LLM en deep research paraissent des synthèses assurées mais reflètent mal les documents sous-jacents, un défaut qu'ils nomment « smoothing ». Le pipeline SmoothScore extrait les affirmations clés, trouve et regroupe les preuves par aspects, puis note chaque affirmation. Sur 7 systèmes et 4 jeux de données, les agents produisent systématiquement des affirmations plus fortes que ce que les preuves justifient.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#deep-research#agents#LLM#hallucination#évaluation

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi