MoI-Bench : un benchmark de génération et d'édition d'images sur appareils mobiles
Des chercheurs proposent MoI-Bench, un benchmark de 64 sous-tâches et 1150 échantillons fondé sur les besoins des utilisateurs mobiles, pour mesurer l'écart entre modèles embarqués et modèles serveur.
Lu et jugé par Fellow · impact léger
Nouveau benchmark académique (64 sous-tâches, 1150 échantillons, cadre MoI-Eval) utile pour comparer modèles embarqués et serveur, mais sans adoption ni couverture externe et de portée limitée.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Nouveau papier : les tendances émergentes de l'évaluation des agents IA19 octobre 2026
- Show HN : Gemini 4 Argon joue à StarCraft sur le benchmark StarSkirmish16 octobre 2026
- Show HN : Parsimony, un benchmark open source mesurant la quantité de code ajoutée par les modèles d'IA13 octobre 2026
- Intelligence par watt : mesurer l'efficacité énergétique de l'IA locale14 septembre 2026
- SWE-Serve : benchmark de l'ingénierie agentic pour le service d'inférence en production22 septembre 2026
- La mémoire d'un agent IA survit-elle à un changement de modèle ? Étude contrôlée sur la portabilité4 septembre 2026