WorldSonus : donner du son aux mondes génératifs

WorldSonus est un framework vidéo-vers-audio conçu pour synthétiser du son stéréo spatialisé en temps réel dans les world models interactifs. Il repose sur une architecture de diffusion autorégressive causale en streaming, avec un pipeline de captioning audio permettant un contrôle dynamique des événements sonores pendant la génération. Les expériences montrent qu'il égale ou dépasse les modèles bidirectionnels état de l'art, tout en généralisant à des benchmarks vidéo-audio en domaine ouvert.