Entraîner le modèle, pas le lecteur : la supervision de décodabilité pour des explications d'activations vérifiables

Les auto-encodeurs en langage naturel évaluent les explications d'activations par reconstruction, un test insensible aux fausses affirmations individuelles. Les chercheurs montrent que ce score capture le sens général mais pas les faits précis, et que des codes privés co-adaptés faussent la fiabilité dans 5/5 runs. Ils proposent RECAP, une méthode d'entraînement conjoint qui rend le contenu désigné vérifiable par des sondes externes, avec un coût minime en performance.