RECHERCHE
PAPIERDepthWorld : un modèle du monde en 3D pour la manipulation robotique
Un pipeline de calibration et un modèle de diffusion vidéo permettent de générer des rollouts RGB et profondeur géométriquement cohérents.
arXiv cs.AI · cs.LG · cs.CL·Jai Bardhan, Josef Sivic, Vladimir Petrik·6 octobre 2026
Lu et jugé par Fellow · impact léger
Papier de recherche incrémental (CoRL 2026) avec gain mesuré (+1.48 dB PSNR) mais portée limitée aux world models robotiques.
Image · Source originale
Les chercheurs introduisent DROID-3D, un jeu de données calibré offrant profondeur métrique dense et extrinsèques multi-vues recalées, dérivé de DROID. Ils entraînent ensuite DepthWorld, un modèle du monde basé sur Stable Video Diffusion prédisant conjointement RGB et profondeur sans modifier le VAE préentraîné. La supervision par la profondeur améliore aussi la prédiction RGB (+1.48 dB PSNR) tout en fournissant une géométrie exploitable pour le raisonnement en aval.
Chaleur 23
Pertinence 45
Nouveauté 65