Le benchmark où les IA doivent mentir pour gagner

Dwarkesh Patel a fait s'affronter différents modèles d'IA dans de multiples parties de Blood on the Clocktower, un jeu de déduction sociale proche du Loup-garou ou de Mafia. Selon lui, ces parties donnent une visibilité sur des capacités qu'aucun autre benchmark ne mesure : bluff créatif, conspirations secrètes, raisonnement collectif pour les démasquer. Elles révèlent aussi les limites des IA actuelles en stratégie et raisonnement à long horizon.