RECHERCHE
PAPIERVerdict : légerCordisBench : raisonnement sur cycles de vie d'agents
Un benchmark évalue la capacité des modèles à suivre l'impact des modifications de plugins dans des systèmes dynamiques complexes.
arXiv·Damien Sileo, Dimitri Kachler·1 septembre 2026
Lu et jugé par Fellow · impact léger
Nouveau benchmark spécifique (1200 questions) sans large adoption ni évaluation indépendante confirmée hors des auteurs.

Image · Source originale
CordisBench est un benchmark de 1 200 questions testant le raisonnement des modèles sur les cycles de vie de composants dans des harnais d'agents dynamiques. Les résultats montrent que les modèles peinent à maintenir la fiabilité lorsque le nombre d'interactions pertinentes augmente, malgré des coûts d'inférence élevés.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Nouveau papier : les tendances émergentes de l'évaluation des agents IA19 octobre 2026
- ProteinGeoBench : les agents de biologie structurale de pointe excellent en recherche d'information mais échouent en géométrie19 octobre 2026
- Le problème est-il vraiment plus difficile ? Test de LLMs sur des paires de problèmes P et NP-complets réécrits par agents adversariaux21 octobre 2026
- Les agents LLM de pointe surestiment fréquemment l'exhaustivité de leur travail17 septembre 2026
- Embodied-BenchForge : workflow agentic pour benchmarks embarqués11 septembre 2026
- HarnessTax : quel est le poids du harnais sur les performances des agents de code ?17 septembre 2026