Aller au contenu
Édition de la mi-journée · N° 556 · prochaine à 17 h
Compte

Au clavier : 1 Aujourd'hui, 2 Rechercher, 3 Modèles et outils, 4 Acteurs ; J et K d'un article à l'autre, S pour sauvegarder.


RECHERCHE
MODÈLEVerdict : notable

Génération texte-image sans préentraînement linguistique : l'approche Halcyon

Des chercheurs présentent Halcyon, une famille de modèles autorégressifs multimodaux entraînés from scratch sur 100M de paires image-texte, qui surpassent des baselines avec bien moins de calcul.

arXiv·Keshigeyan Chandrasegaran, Yue Zhao, Armin W. Thomas, Ehsan Adeli·19 octobre 2026

Lu et jugé par Fellow · impact notable

Résultat de recherche vérifiable avec code et modèles publiés : un T2I entraîné from scratch sur 100M de paires bat des baselines avec 18 à 275 fois moins de calcul, à confirmer en reproduction.

Verdict rendu par une IA selon une grille publique

Discuter de ce verdict

Génération texte-image sans préentraînement linguistique : l'approche Halcyon
Image · Source originale
Halcyon est une famille de modèles autorégressifs multimodaux à fusion précoce, préentraînés entièrement from scratch sur GPIC (100M de paires image-texte). Halcyon-0.52B devance LlamaGen-XL/8 (48,0 vs 63,3 gFD) avec 18,2 fois moins de calcul, et Halcyon-1.6B devance JiT-T2I-XXL/8++ (35,3 vs 41,0 gFD) avec 275 fois moins de calcul. Le préentraînement textuel seul n'améliore pas la génération T2I. Code et modèles sont disponibles.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille

OUVRIR LA SOURCE ↗
#text-to-image#autoregressive#multimodal#pretraining

Une question sur cet article ?

Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.

À lire aussi