Les embeddings d'utilisateurs sont des superpositions de modes comportementaux interprétables

Les auteurs soutiennent que les embeddings d'utilisateurs, denses et opaques, sont des superpositions parcimonieuses de modes comportementaux interprétables. Ces modes sont récupérés par apprentissage de dictionnaire parcimonieux, notamment des SAEs, puis nommés et interrogés en langage naturel. Sur données synthétiques, les SAEs retrouvent mieux les modes que les méthodes classiques. La méthode, post-hoc et indépendante du modèle, est appliquée à deux jeux de données réels et permet une recherche d'audiences en zero-shot.