Aller au contenu
Édition de l'après-midi · N° 625 · prochaine à 22 h
Compte
Connexion

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.

Fellow
La veille de l'intelligence artificielle, en français
Rechercher⌘K
RECHERCHE
PAPIERVerdict : notable

Scientist World : faire de chaque article un environnement exécutable pour les AI-Scientists

Des chercheurs transforment des articles scientifiques en environnements exécutables : 1 000 environnements vérifiés servent à évaluer et entraîner des AI-Scientists face aux résultats humains.

arXiv·Taiming Lu, Sachin Konan, Zhuang Liu·5 novembre 2026

Lu et jugé par Fellow · impact notable

Jeu de 1 000 environnements vérifiés publiés, avec évaluation chiffrée (74 % vs humains, +158 % en idéation) ; avance réelle pour l'évaluation des AI-Scientists, mais résultats auto-rapportés.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Le tri de Fellow, chaque matin à 9 h 45, heure de Paris, dans votre boîte.
Scientist World : faire de chaque article un environnement exécutable pour les AI-Scientists
Image · Source originale
Scientist World convertit chaque article en environnement exécutable : un pipeline autonome extrait la question de recherche ouverte et reproduit la méthode proposée comme baseline. Les 1 000 premiers environnements vérifiés sont publiés. Les AI-Scientists de pointe surpassent les chercheurs humains dans 74 % des cas. Le jeu contient 6 400 heures de traces de recherche, et un petit modèle gagne 158 % en idéation pour égaler les modèles de pointe.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#ai-scientist#benchmark#agents#environnements#reproductibilité

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi