Databricks évalue des agents de codage sur sa base de code de plusieurs millions de lignes

Databricks a évalué plusieurs agents de codage sur sa propre base de code de production, comptant plusieurs millions de lignes. Le benchmark vise à mesurer les performances réelles de ces agents dans un contexte industriel complexe, bien au-delà des jeux de données académiques classiques. Les résultats mettent en lumière les limites actuelles des agents face à des codebases larges et hétérogènes.