Aller au contenu
Édition du soir · N° 574 · prochaine à 9 h
Compte
Connexion

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.

Fellow
La veille de l'intelligence artificielle, en français
Rechercher⌘K
RECHERCHE

APEX-Accounting : un benchmark pour évaluer les modèles d'IA sur des tâches comptables réelles

Mercor et Ramp lancent un benchmark fermé de 160 tâches comptables. Aucun modèle ne dépasse 56% de réussite moyenne.

arXiv·Julien Benchek, Austin Bennett, Jasmin Kern, Ryan Stevens·29 juillet 2026
APEX-Accounting : un benchmark pour évaluer les modèles d'IA sur des tâches comptables réelles
Image · Source originale
APEX-Accounting évalue neuf modèles frontières sur des tâches réelles de comptabilité : rapprochement de comptes, provisions, écritures, rapports. Claude-Fable-5 (Max) arrive en tête avec 56,4% de Mean Criteria@3, suivi de Muse-Spark-1.1 (xHigh) à 52,6%. Les chercheurs notent un paradoxe de Simpson : augmenter le budget de tokens améliore les scores globalement, mais à budget fixe, dépenser plus de tokens par tâche dégrade les performances.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#benchmark#comptabilité#évaluation-llm#agents

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi