RECHERCHE
Le piège des basses fréquences : les modèles vidéo-langage échouent au comptage simple d'événements
Une étude sur 2 190 vidéos contrôlées révèle que les VLM comme Gemini échouent massivement dès que le nombre et la fréquence d'événements augmentent.
arXiv·Sarvesh Baskar, Zikui Cai, Shayan Shabihi, Anirudh Satheesh·6 août 2026

Image · Source originale
Les chercheurs introduisent un protocole de profilage paramétrique pour évaluer le comptage d'événements dans des vidéos contrôlées (rebonds de balle, clignements, transitions d'état). À forte fréquence et fort volume d'événements, seulement 0,2% des comptages finaux sont corrects et le modèle ne récupère que 18,1% des événements réels. Augmenter le taux d'échantillonnage améliore légèrement la précision mais pas la cohérence temporelle des séquences rapportées.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- ProteinGeoBench : les agents de biologie structurale de pointe excellent en recherche d'information mais échouent en géométrie19 octobre 2026
- Nouveau papier : les tendances émergentes de l'évaluation des agents IA19 octobre 2026
- Estimation et validité des horizons temporels de l'IA : un regard statistique sur le graphique METR8 octobre 2026
- Fuse : raisonnement social vérifiable pour assistants LLM15 septembre 2026
- HarnessTax : quel est le poids du harnais sur les performances des agents de code ?17 septembre 2026
- EarlyEval : réduire le coût de l'évaluation des agents grâce à la prédiction précoce des résultats2 septembre 2026