RECHERCHE
ELF : modèles de flux en espace d'embedding continu pour le langage
Une nouvelle architecture de diffusion linguistique reste en espace continu jusqu'à la dernière étape, surpassant les modèles discrets existants.
arXiv cs.AI · cs.LG · cs.CL·Keya Hu, Linlu Qiu, Yiyang Lu, Hanhong Zhao·11 mai 2026
Image · Source originale
ELF (Embedded Language Flows) propose une classe de modèles de diffusion opérant en espace d'embedding continu via le Flow Matching en temps continu. Contrairement aux modèles de diffusion linguistique (DLM) dominants qui travaillent sur des tokens discrets, ELF ne convertit vers le discret qu'à la dernière étape via un réseau à poids partagés. Cette approche facilite l'adaptation de techniques éprouvées comme le classifier-free guidance (CFG) et surpasse les DLM discrets et continus en qualité de génération avec moins d'étapes d'échantillonnage.
Chaleur 0
Pertinence 68
Nouveauté 72