Un échantillonneur basé sur les ODE pour les modèles de diffusion discrets

Les auteurs cherchent un équivalent discret de la probability flow ODE des modèles de diffusion continus. Les exponential residual flows ajoutent à l'état discret une variable résiduelle continue par token et par position, évoluant selon des ODE définies par morceaux ; l'état change quand un résiduel atteint zéro. Les marginales de la diffusion d'origine sont préservées, avec une version pratique pour les diffusions masquées et uniformes. Les trajectoires déterministes permettent la consistency distillation et améliorent les résultats sur plusieurs benchmarks, dont la génération de code et de texte.