La généralisation de persona est-elle prévisible ?

La généralisation de persona désigne les changements de comportement induits dans d'autres domaines par le fine-tuning d'un modèle sur un seul, comme dans l'emergent misalignment. Les auteurs observent une relation approximativement probit-linéaire entre taux en domaine et hors domaine, partagée entre familles et tailles de modèles, dont Qwen et Llama. Learning rate, weight decay et durée d'entraînement déplacent les modèles le long de la même droite, tandis que le choix des couches fine-tunées modifie la pente. Fine-tuner uniquement les couches tardives réduit le misalignment hors domaine tout en préservant l'apprentissage en domaine.