Aller au contenu
Édition du matin · N° 619 · prochaine à 13 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE
PAPIERVerdict : léger

FrontierPhysics : évaluer les agents sur la recherche en physique de bout en bout

Un nouveau benchmark de 56 tâches conçues par 42 physiciens teste des agents IA sur toute la chaîne de recherche. Aucune des 26 configurations évaluées ne dépasse 46 rollouts réussis sur 168.

arXiv·Bingran You, Wenjun Ke, Ria Rosenauer, Bo Liu·4 novembre 2026

Lu et jugé par Fellow · impact léger

Benchmark de 56 tâches conçues par 42 physiciens, avec vérificateurs déterministes et grilles d'experts, évaluant 22 modèles ; utile aux chercheurs en évaluation d'agents, mais portée limitée et sans citation externe.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Le tri de Fellow, chaque matin à 9 h 45, heure de Paris, dans votre boîte.
FrontierPhysics : évaluer les agents sur la recherche en physique de bout en bout
Image · Source originale
FrontierPhysics est un benchmark de 56 tâches issues des recherches de 42 physiciens, couvrant neuf domaines de la physique théorique, computationnelle et expérimentale. Chaque tâche exige revue de littérature, plan de recherche, expériences et rédaction d'un manuscrit, évalués par des vérificateurs déterministes et des grilles d'experts. Sur 22 modèles en 26 configurations, aucune ne réussit plus de 46 de ses 168 rollouts. Les faiblesses principales tiennent à un raisonnement insuffisamment rigoureux et à une intuition d'expert limitée.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#benchmark#agents#physique#evaluation

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi