Mental World Modeling : intégrer les états mentaux dans les modèles du monde

Les modèles du monde actuels décrivent uniquement l'état physique d'une scène, sans tenir compte de ce que chaque agent croit, veut ou ressent. Les chercheurs proposent Mental World Modeling (MWM), un cadre couplant état physique et mental, instancié dans la baseline MENTIS, sans entraînement. Testé sur 8 LLM avec des scénarios texte, image et vidéo, ce cadre montre que modéliser l'état mental est indispensable pour prédire correctement les décisions humaines.