Aller au contenu
Édition du soir · N° 574 · prochaine à 9 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE
PAPIERVerdict : notable

Les LLM récupèrent-ils les données moléculaires par cœur ?

Une étude auditant 22 modèles frontières révèle un phénomène massif de mémorisation littérale sur les benchmarks de propriétés moléculaires.

arXiv·Matthias Busch, Marius Tacke, Sviatlana V. Lamaka, Mikhail L. Zheludkevich·4 septembre 2026

Lu et jugé par Fellow · impact notable

Audit méthodologique de 22 modèles révélant une contamination par mémorisation qui fausse les benchmarks moléculaires existants.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Les LLM récupèrent-ils les données moléculaires par cœur ?
Image · Source originale
Ce papier audite 22 LLMs sur 12 benchmarks de régression moléculaire pour détecter la récupération verbatim de valeurs publiées. Ce phénomène est répandu mais spécifique aux datasets et amplifié par le raisonnement. La suppression de la retrieval réduit les écarts de performance entre modèles.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#llm#memorization#molecular-ai#benchmark#retrieval

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi