Graph Sparse Sampling : planification MDP continue sans explosion exponentielle de l'horizon

Graph Sparse Sampling (GSS) est un algorithme de planification en ligne pour les MDP continus qui remplace la structure arborescente des méthodes MCTS par un graphe sans branchement. En mutualisant les futurs échantillonnés entre actions candidates, GSS expose de larges batchs compatibles GPU et réduit la complexité de l'horizon de exponentielle à polynomiale. Des garanties théoriques sont établies pour simulateurs full-rank et low-rank, espaces d'actions discrets ou continus. Les simulations montrent des performances supérieures aux planificateurs arborescents sur les longs horizons.