RECHERCHE
PAPIERIdentification du meilleur bras dans les bandits à moyennes changeantes : une nouvelle approche robuste aux perturbations adversariales
Des chercheurs proposent ISM, un algorithme qui identifie le meilleur bras avec haute probabilité malgré des décalages adversariaux des récompenses moyennes, là où les méthodes classiques comme Track-and-Stop échouent.
arXiv cs.AI · cs.LG · cs.CL·Lukas Zierahn, Wouter M. Koolen, Shubhada Agrawal, Christina Katsimerou·7 octobre 2026
Lu et jugé par Fellow · impact notable
Article de recherche théorique accepté à NeurIPS 2026 proposant un nouvel algorithme (ISM) avec preuve de correction et borne de complexité pour un cadre de bandits adversariaux peu étudié ; contribution incrémentale mais solide dans un domaine actif, sans application immédiate déployable.
Image · Source originale
Cet article étudie l'identification du meilleur bras (best arm identification) dans un environnement stochastique où les écarts entre les récompenses moyennes des bras restent stables, mais où leur décalage commun peut être modifié adversarialement à chaque tour — un cadre baptisé « Shifting Means ». Les auteurs montrent que les algorithmes classiques utilisant un test de rapport de vraisemblance généralisé (GLRT), dont Track-and-Stop, échouent sous ces décalages temporels. Ils proposent ISM (Importance Weights for Shifting Means), prouvé δ-correct avec une complexité d'échantillonnage de l'ordre de K(σ² + U²)Δ_min⁻² ln(1/δ), et établissent une borne inférieure correspondante. Des évaluations empiriques confirment les résultats théoriques.
Chaleur 20
Pertinence 55
Nouveauté 75
#bandits#best-arm-identification#apprentissage-par-renforcement#robustesse#algorithmes