Les modèles génératifs vidéo comme apprenants de géométrie

Les chercheurs reformulent l'estimation géométrique comme une tâche de prédiction de frames suivantes en s'appuyant sur des modèles génératifs vidéo pré-entraînés. GeoNeXt modélise conjointement images et cibles géométriques, exploitant des priors plus riches et structurés. La méthode surpasse les approches génératives unifiées et spécialisées existantes en zero-shot, tout en rivalisant avec des méthodes discriminatives entraînées sur plus de 100 fois plus de données.