RECHERCHE
PAPIERVerdict : notableLes LLM récupèrent-ils les données moléculaires par cœur ?
Une étude auditant 22 modèles frontières révèle un phénomène massif de mémorisation littérale sur les benchmarks de propriétés moléculaires.
arXiv·Matthias Busch, Marius Tacke, Sviatlana V. Lamaka, Mikhail L. Zheludkevich·4 septembre 2026
Lu et jugé par Fellow · impact notable
Audit méthodologique de 22 modèles révélant une contamination par mémorisation qui fausse les benchmarks moléculaires existants.

Image · Source originale
Ce papier audite 22 LLMs sur 12 benchmarks de régression moléculaire pour détecter la récupération verbatim de valeurs publiées. Ce phénomène est répandu mais spécifique aux datasets et amplifié par le raisonnement. La suppression de la retrieval réduit les écarts de performance entre modèles.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Même simulation, preuves différentes : le coût en précision de la récupération des sorties d'outils chez les agents LLM19 octobre 2026
- DeepSeek V4.1 Flash 1017 (Max) : fiche du modèle sur Artificial Analysis19 octobre 2026
- Riches en valeurs, organisées autrement : mesurer l'expression et l'organisation des valeurs dans les débats générés par IA20 octobre 2026
- Benchmarker l'inférence LLM à grande échelle avec AIPerfNVIDIA · 18 septembre 2026
- Le routeur intérieur : révéler le routage natif de compétences d'un LLM figé14 septembre 2026
- Fuse : raisonnement social vérifiable pour assistants LLM15 septembre 2026