Vers une compréhension de l'impact de la perte de plasticité sur le reinforcement learning en environnements stochastiques

Les auteurs étudient la perte de plasticité des réseaux de neurones en deep RL dans des environnements stochastiques, avec des agents SAC sur trois tâches DeepMind Control soumises à du bruit d'observation et d'action. Les méthodes préservant la plasticité renforcent la robustesse sur les deux tâches les plus difficiles, mais combiner resets et layer normalization est moins efficace que les resets seuls. Dans les cas les plus exigeants, l'instabilité TD devient le principal mode d'échec.