Aller au contenu
Édition du soir · N° 574 · prochaine à 9 h
Compte
Connexion

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.

Fellow
La veille de l'intelligence artificielle, en français
Rechercher⌘K
RECHERCHE

Desktop-Delta Bench : évaluer la compréhension des GUI par les IA

Un nouveau benchmark teste la capacité des modèles d'IA à comprendre les transitions d'interface graphique sur desktop.

arXiv·Abhishek Pillai, Samir Kumar Nayak, Yuan Chen·28 juillet 2026
Desktop-Delta Bench : évaluer la compréhension des GUI par les IA
Image · Source originale
Desktop-Delta Bench (DDB) est un benchmark hors-ligne évaluant si les agents d'ordinateur (CUAs) peuvent reconstruire les transitions causales des interfaces graphiques. Composé de 2 013 instances vérifiées sur Linux, il teste 3 dimensions de défaillance via 2 tâches complémentaires. Les évaluations sur 32 familles de modèles montrent des lacunes persistantes en matière de tri temporel et d'identification du contexte.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#benchmark#computer-use#agents#gui#evaluation

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi