Un modèle de préférence de Markov caché pour la prédiction en ligne des actions d'un adversaire

Les auteurs modélisent le comportement d'un attaquant par un modèle de Markov caché dont l'état latent est le régime actif, avec une loi d'action définie sur un arbre d'actions exécutables masqué par la faisabilité. La même vraisemblance fournit la distribution de la prochaine action et met à jour la croyance sur le régime. Ils établissent une expression de KL pondérée, une borne de log-loss et une garantie de repli uniforme. Sur le benchmark CAGE 2, l'état latent filtré vaut 0,8 nat par pas, et la perte baisse en trois pas après un changement de contrôleur, contre dix pour une baseline récurrente.