RECHERCHE
Que apprend un modèle de diffusion discret ?
Une analyse théorique rigoureuse unifie les paramétrisations des modèles de diffusion discrets et démontre leur équivalence au niveau des taux de saut.
arXiv cs.AI · cs.LG · cs.CL·Rodrigo Casado Noguerales, Bernhard Schölkopf, Thomas Hofmann, Aran Raoufi·6 juillet 2026
Image · Source originale
Les auteurs établissent un cadre théorique unifié pour les modèles de diffusion discrets en temps continu (CTMC), prouvant le théorème de l'Oracle Distance : la negative ELBO équivaut exactement à l'entropie des données plus la divergence KL de chemin entre le processus inverse oracle et le modèle appris. Ce résultat identifie l'optimiseur unique comme l'espérance conditionnelle du taux de saut inverse, et unifie les paramétrisations dénoiser, cavity et score. Le framework réconcilie des modèles existants (MDM, UDM, SEDD, GIDD) et explique pourquoi certaines paramétrisations divergent à l'initialisation.
Chaleur 29
Pertinence 55
Nouveauté 78