Comment un évaluateur pourrait examiner les preuves d'une accélération liée à l'automatisation de la R&D en IA

METR expose comment un évaluateur pourrait étudier une accélération des capacités liée à l'IA elle-même. L'évaluation porterait sur la vitesse de progression interne, la part due à l'automatisation, les goulots d'étranglement et les limites des méthodes. Elle impliquerait d'analyser des modèles non publiés, les intrants de la R&D (travail, compute, données, algorithmes) et des échanges avec les chercheurs.