SPADE : un framework de self-play pour générer des environnements d'entraînement adaptatifs

SPADE fait jouer un seul LLM à deux rôles : concepteur d'environnements exécutables et agent qui apprend à y évoluer. Le concepteur cible des tâches proches des limites de l'agent en optimisant un signal de regret, ce qui améliore les performances sur des modèles jusqu'à 30B paramètres, avec un gain moyen de +5.3 sur huit benchmarks de math, science, code et raisonnement.