XStack : un benchmark pour la migration de dépôts de code ML
XStack évalue des agents chargés de migrer des dépôts ML de PyTorch sur GPU NVIDIA vers JAX sur TPU. Claude Opus 5 atteint 75 % de réussite, les autres agents 45 % au plus.
Lu et jugé par Fellow · impact léger
Benchmark de recherche publié, avec protocole de notation décrit et résultats chiffrés par agent, mais portée limitée à la migration PyTorch/JAX et sans reprise externe à ce stade.

Traduit et résumé par IA à partir de l'article d'arXiv ↗ · Comment Fellow travaille
Une question sur cet article ?
Fellow répond à partir de ce qu'il a publié et cite chaque source. Réponses rédigées par une IA.
À lire aussi
- Le coût en IA des frameworks JavaScript : un benchmark avec des agents28 octobre 2026
- FrontierPhysics : évaluer les agents sur la recherche en physique de bout en bout4 novembre 2026
- DiabAgent : vers un contrôle physiologique agentique2 novembre 2026
- Apprendre des méta-compétences pour concevoir des harnais d'agents à l'inférence29 septembre 2026
- Turbo Harness : optimisation de harness adaptée à chaque instance30 septembre 2026
- Penser avant de penser : passer à l'échelle l'inférence agentique par méta-raisonnement29 septembre 2026