Au-delà des changements de réponse : contrôles appariés de même classe pour l'évidence audio locale
Un protocole compare des remplacements d'événements sonores de même classe et de classe différente pour mesurer si les audio-language models réagissent à la classe de l'événement ou à la réécriture du signal.
Lu et jugé par Fellow · impact léger
Protocole de contrôle apparié vérifiable (600 paysages synthétiques, 3 modèles, code publié) mais portée limitée à l'évaluation des modèles audio-langage, sans validation indépendante.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Que mesurent réellement les benchmarks de réparation de RTL ?20 octobre 2026
- ProteinGeoBench : les agents de biologie structurale de pointe excellent en recherche d'information mais échouent en géométrie19 octobre 2026
- KEEP-Bench : évaluer la préservation des preuves dans la compression de contexte19 octobre 2026
- Quand les juges LLM sont d'accord, faut-il les croire ?14 septembre 2026
- HarnessTax : quel est le poids du harnais sur les performances des agents de code ?17 septembre 2026
- Comment l'UK AISI et EvalEval rendent les résultats de benchmarks reproductiblesHugging Face · 22 septembre 2026