Co-évolution de l'action et de la prévision pour les agents de langage

Les auteurs proposent une méthode qui, sur des trajectoires on-policy réussies, entraîne le backbone de la politique à générer les séquences d'actions suivant chaque historique. Chaque action est aussi supervisée à partir des historiques précédents, ce qui forme un ensemble temporel et permet la co-évolution de l'action et de la prévision. L'agent agit toujours pas à pas à l'inférence. Sur ALFWorld, ScienceWorld, WebShop, τ²-bench et AppWorld, la méthode surpasse GRPO et des baselines RL à cibles auxiliaires prédictives, avec une efficacité d'échantillonnage jusqu'à 1,9× et 2,0× supérieure à ECHO.