ReWorld : un modèle de monde interactif avec mémoire à long terme

ReWorld est un modèle de monde interactif qui distingue la gestion des actions à court terme de la mémorisation à long terme lors de l'entraînement. Il utilise une attention mixte par tête et un cache KV indexé par la posture pour gérer des historiques illimités sous un budget fixe à l'inférence. Le système, compressé via distillation dans un adaptateur LoRA, génère des vidéos haute fidélité de 704x1280 pixels en temps réel.