RECHERCHE
PAPIERVerdict : légerCalibration de Bellman pour la pondération par importance marginalisée en apprentissage par renforcement hors ligne
Une méthode de post-traitement isotone corrige les biais des estimateurs de ratio d'occupation sans nécessiter de réoptimisation complète du modèle.
arXiv·Lars van der Laan, Nathan Kallus·25 août 2026
Lu et jugé par Fellow · impact léger
Article académique proposant une méthode théorique de post-traitement pour corriger des biais d'estimation.

Image · Source originale
Les chercheurs proposent la calibration de Bellman isotone, une méthode de post-traitement unidimensionnelle et agnostique au modèle qui corrige l'échelle et la forme des estimations de ratio d'occupation en RL hors ligne. L'approche préserve l'information de classement de l'estimation initiale tout en réduisant les violations d'équilibre d'occupation, avec des garanties théoriques de calibration en échantillon fini et une inégalité oracle de type KL.
Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Quand et où faire confiance à l'enseignant : unifier distillation on-policy et GRPO via attribution de crédit calibrée par l'entropie23 septembre 2026
- MLExpert : vers un modèle agentique généraliste pour l'ingénierie du machine learning autonome15 octobre 2026
- Limites minimax de la calibration à score fixe par régression quantile conformalisée sous covariate shift21 septembre 2026
- DeepMind : 15 ans de recherches IA en jeu vidéoDeepMind · 21 août 2026
- Interaction on-policy en imitation learning : quand aide-t-elle vraiment ?31 juillet 2026
- Sentinel-RL : externaliser le raisonnement topologique des agents LLM dans le SOC3 septembre 2026