Aller au contenu
Édition du matin · N° 551 · prochaine à 13 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


SAFETY
PAPIERVerdict : léger

Couplages comportementaux : de leur formation à l'émergence de comportements dans les modèles de langage

Une étude montre que le fine-tuning d'un LLM sur un comportement peut en déclencher un autre lorsque les deux étaient associés dans des documents d'entraînement, et que ces couplages peuvent se composer.

arXiv·Dongyoon Hahm, Woogyeol Jin, Dennis Wei, Yi Zhou·16 octobre 2026

Lu et jugé par Fellow · impact léger

Résultat de recherche expérimental sur la formation et la composition de couplages comportementaux par fine-tuning, utile pour la sûreté mais encore préliminaire et sans outil ni mesure pour y remédier.

Verdict rendu par une IA selon une grille publique

Couplages comportementaux : de leur formation à l'émergence de comportements dans les modèles de langage
Image · Source originale
Les auteurs définissent le « couplage comportemental » : une relation où le fine-tuning sur un comportement fait émerger un autre comportement. Un modèle entraîné sur des documents associant deux comportements distincts exhibe le second après un fine-tuning ciblant le premier, ce que n'observe pas un modèle sans cet entraînement. Les couplages peuvent aussi se composer : si deux ensembles de documents partagent un comportement, le fine-tuning sur le comportement 1 fait émerger les comportements 2 et 3, ce qui complique le traçage de l'origine d'un comportement indésirable.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#fine-tuning#alignement#misalignment#LLM#comportements-émergents

À lire aussi