WorkflowArena : évaluer l'orchestration de workflows exécutables dans les systèmes multi-agents à base de LLM

WorkflowArena formalise l'orchestration de workflows comme capacité distincte des systèmes multi-agents et propose 145 tâches long-horizon dans 8 domaines, de l'ingénierie logicielle aux mathématiques formelles, évaluées par un vérificateur caché. Les agents décident seuls de déléguer ou non, et chaque délégation est enregistrée. Sur neuf modèles, aucune configuration ne domine partout ; à effort élevé, les modèles Claude dans Claude Code lancent moins de workflows avec des groupes plus larges, tandis que les modèles GPT dans Codex délèguent plus souvent en unités plus petites.