Gestion de bundles et contrôle de flux orientés objectif pour les communications en espace lointain par apprentissage par renforcement

Les auteurs proposent un framework de modélisation et d'apprentissage en boucle fermée pour la gestion des bundles et des flux sur un relais à tampon partagé, qui transmet des mises à jour lunaires et martiennes vers la Terre. La fraîcheur de l'information est mesurée par l'âge excédentaire, ce qui permet des pénalités non linéaires selon la source. Le contrôle est formulé comme un CSMDP résolu par un PPO lagrangien avec masquage d'actions tenant compte de la faisabilité dans la fenêtre de contact.