Natural Ungrokking : pourquoi certaines règles disparaissent en cours de préentraînement

Le phénomène baptisé « natural ungrokking » par Juliana Li et Diya Sreedhar remet en question une hypothèse centrale dans l'étude du préentraînement des LLM : l'idée que la loss curve constitue un indicateur fiable de ce qu'un modèle retient ou abandonne. Présenté au workshop Foundations of Deep Generative Models (FoGen) à ICML 2026, ce travail documente une dynamique d'apprentissage inédite où un modèle acquiert une règle linguistique, la généralise avec succès, puis la perd complètement — sans que la courbe de perte globale n'en porte la moindre trace.

Le protocole expérimental est centré sur la résolution de pronoms genrés, une règle syntaxique claire et testable. Un petit LLM, entraîné classiquement, atteint un score de 0,94 sur des probes de généralisation dès le pas 925, signifiant qu'il associe correctement un prénom féminin à un pronom féminin dans des contextes inédits. Puis, autour du pas 3 500, cette performance s'effondre jusqu'à zéro. Les données qui soutenaient la règle sont toujours présentes dans le corpus d'entraînement. L'oubli n'est donc pas lié à une disparition de l'information, mais à une compétition entre représentations.

Les auteurs montrent que cet effondrement n'est pas aléatoire : il est prévisible par une seule statistique du corpus, la fréquence à laquelle la règle ciblée l'emporte sur les patterns concurrents dans le flux d'entraînement. Autrement dit, ce n'est pas la présence de l'information qui importe, mais sa domination statistique relative. Le ratio données/paramètres joue un rôle secondaire : il module la profondeur de l'oubli pour une règle condamnée, sans en modifier le verdict. Ce résultat est répliqué sur deux corpus, trois budgets de calcul et trois seeds différentes, ce qui renforce sa robustesse.

L'analyse mécaniste apporte un éclairage supplémentaire : l'oubli est qualifié de displacement, c'est-à-dire un déplacement par compétition. Un pattern de surface — plus fréquent ou plus saillant statistiquement — finit par supplanter la règle abstraite dans les représentations internes du modèle. Les auteurs mesurent que la marge de log-probabilité entre la règle et le pattern concurrent franchit zéro dans les 100 pas d'entraînement précédant l'effondrement comportemental observable. Ce délai très court entre le basculement interne et la dégradation en performance suggère un point de rupture net plutôt qu'une érosion graduelle.

La dynamique émergence-puis-effondrement a également été retrouvée dans les checkpoints publics du modèle Pythia, avec une profondeur d'effondrement ordonnée selon la taille du modèle dans le sens prédit par la théorie. Ce résultat sur des modèles existants tend à valider la généralité du phénomène au-delà du cadre expérimental contrôlé de l'étude.

L'aspect le plus contre-intuitif concerne le contrôle asymétrique du sort des règles. Les auteurs démontrent qu'il est possible de détruire une règle à la demande en injectant des contre-exemples ciblés dans le corpus : la dégradation suit une relation dose-réponse monotone et reproductible sur deux règles distinctes. En revanche, l'opération inverse — restaurer une règle déjà perdue en augmentant massivement le support positif — échoue systématiquement, même en portant ce support à 450 fois le niveau naturellement suffisant pour maintenir la règle dans un run non intervenu. Cette asymétrie radicale suggère qu'une fois un pattern de surface ancré, il résiste à la réinjection d'information contradictoire avec une robustesse difficile à expliquer par les seuls mécanismes de gradient descent.

Ces résultats soulèvent plusieurs questions ouvertes pour la communauté. Si la survie d'une règle dépend de sa fréquence de dominance dans le flux d'entraînement plutôt que de sa présence absolue, cela implique que la composition et l'ordonnancement des données d'entraînement ont une influence structurelle sur les capacités cognitives finales d'un modèle — une influence non détectable via la loss curve standard. La possibilité de détruire des comportements par contre-exemples, mais pas de les restaurer, pose également des questions pratiques pour le fine-tuning et l'alignement : corriger un comportement indésirable paraît plus accessible que d'en implanter un nouveau sur des bases déjà compétitives. L'ensemble des seuils et prédictions de l'étude avait été pré-enregistré avant la collecte des données, ce qui renforce la valeur épistémique des conclusions.