RECHERCHE
OmegaUse-OfficeVal : benchmark d'agents LLM pour tâches bureautiques
Un nouveau benchmark évalue les agents LLM sur des workflows bureautiques longs avec des indicateurs économiques.
arXiv·Jingbo Zhou, Yusai Zhao, Qi Bao, Jingjia Cao·29 juillet 2026

Image · Source originale
OmegaUse-OfficeVal est un benchmark composé de 100 tâches bureautiques complexes, évaluant les agents LLM selon des signaux économiques comme le temps de travail humain. Les tests montrent que si les modèles sont plus rapides et moins coûteux que les humains, ils n'atteignent pas encore la qualité des livrables humains. Le code et le dataset sont en open-source.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- ProteinGeoBench : les agents de biologie structurale de pointe excellent en recherche d'information mais échouent en géométrie19 octobre 2026
- Nouveau papier : les tendances émergentes de l'évaluation des agents IA19 octobre 2026
- L'agent IA a corrigé le bug, mais qu'a-t-il modifié d'autre ? Trail of Bits publie deux plugins21 octobre 2026
- Fuse : raisonnement social vérifiable pour assistants LLM15 septembre 2026
- Embodied-BenchForge : workflow agentic pour benchmarks embarqués11 septembre 2026
- HarnessTax : quel est le poids du harnais sur les performances des agents de code ?17 septembre 2026