Aller au contenu
Édition du matin · N° 551 · prochaine à 13 h
Compte
Connexion

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.

Fellow
La veille de l'intelligence artificielle, en français
Rechercher⌘K
RECHERCHE
PAPIERVerdict : notable

Reproductibilité et robustesse analytique en découverte scientifique grâce à l'IA

Des agents LLM reproduisent 77,4 % de 2 190 affirmations issues d'études basées sur la base SEER et signalent les choix analytiques potentiellement déterminants pour relecture par des experts.

arXiv·Shicheng Liu, Krista Opsahl-Ong, Andrew Drozdov, Julian Killingback·16 octobre 2026

Lu et jugé par Fellow · impact notable

Benchmark public de 20 articles SEER et agent reproduisant 77,4 % de 2 190 affirmations, avec pipeline de robustesse chiffré (9,5 % de choix déterminants) : avance méthodologique réelle mais encore préliminaire.

Verdict rendu par une IA selon une grille publique

Reproductibilité et robustesse analytique en découverte scientifique grâce à l'IA
Image · Source originale
Les auteurs introduisent SEER-Repro, un benchmark de 20 articles publiés fondés sur la base américaine SEER, avec les données nécessaires à leur reproduction. Un agent IA reproduit 77,4 % de 2 190 affirmations atomiques. Un pipeline agentique teste la robustesse des résultats en identifiant les choix analytiques, en proposant des alternatives et en relançant l'analyse : il repère des choix potentiellement déterminants dans 9,5 % des résultats entièrement reproduits.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#agents#reproductibilité#benchmark#LLM#science

À lire aussi