Aller au contenu
Édition du matin · N° 663 · prochaine à 13 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE
PAPIERVerdict : léger

WeightBench : évaluer les modèles de langage comme programmeurs de l'espace des poids

Un nouveau benchmark de 42 tâches mesure la capacité des LLM à lire, corriger et écrire directement les poids de réseaux de neurones, sans descente de gradient.

arXiv·Aayush Marasini, Barsat Khadka, Nick Rahimi·13 novembre 2026

Lu et jugé par Fellow · impact léger

Nouveau benchmark de 42 tâches avec code, registre de tâches et leaderboard publics, mais domaine de niche (programmation dans l'espace des poids) et sans couverture externe.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Le tri de Fellow, chaque matin à 9 h 45, heure de Paris, dans votre boîte.
WeightBench : évaluer les modèles de langage comme programmeurs de l'espace des poids
Image · Source originale
WeightBench évalue des LLM sur 42 tâches de Weight-Space Programming réparties en cinq pistes : lecture, correction et écriture de poids, reconnaissance d'éditions impossibles, compression sans données. Les réseaux vont de politiques de contrôle de 2K paramètres à des modèles de 7B paramètres. Les agents de pointe lisent de petits réseaux et écrivent des politiques fonctionnelles, mais ne savent pas encore patcher des modèles de langage ni les compresser sans données. Claude Opus 5.5 obtient 0,535 en score macro ; code et leaderboard sont publics.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#benchmark#weight-space-programming#LLM#agents#évaluation

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi