Computer use
Fellow suit ce sujet depuis juin 2026 : 26 articles résumés en français, dont 7 jugés majeurs ou notables.
Les sorties majeures
GPT-6 Astra : la nouvelle génération d'intelligence pour le travail selon OpenAI
Nouveau modèle GPT-6 disponible via API et ChatGPT Work, avec capacités de contrôle d'ordinateur et tarifs publics.
Toute l'actualité · 26 articles
Agents incarnés multimodaux : une perspective unifiée centrée sur les capacités, du computer-use au robot-use
Un papier propose PAPAV, un cadre en cinq fonctions pour comparer agents multimodaux et systèmes robotiques, et note que peu de benchmarks évaluent Anticipate et Verify.
Evolving Agent Interfaces : faire évoluer les interfaces des agents à partir de l'expérience
Agent S4 confie à un méta-agent la conception des interfaces d'agents computer-use. Avec Qwen3.8-27B, il atteint 21,3 % sur OSWorld V2, devant GPT-5.5 et Claude Opus 4.8, à une fraction du coût.
Lab Notes : post-training de Nemotron 3.5 Super VL 120B-A12B pour l'usage d'ordinateur
H Company détaille sa recette de post-training (SFT, fusion de poids, RL) sur le modèle de vision de NVIDIA. Le checkpoint Holotron4-Super-Preview gagne 25,1 points sur OSWorld.
Player-1 : apprendre à jouer à partir d'expérience synthétique
Un framework de post-training enseigne le contrôle de jeux vidéo à des agents grâce à seize environnements synthétiques et au reinforcement learning PPO, au-delà des simples démonstrations.
OpenAI et Ironclad font progresser l'usage d'ordinateur par des agents IA
OpenAI et Ironclad entraînent et évaluent des agents IA sur des workflows contractuels complexes pour faire avancer le travail autonome sur ordinateur.
Computer Use : pourquoi Dwarkesh se trompe, et comment OpenAI a cloné Jev en une semaine
Latent Space reçoit Ari Weinstein (Sky) sur l'état de l'art du Computer Use, puis Nikunj Handa (OpenAI) détaille la nouvelle stack développeur de l'API.
OpenAI présente GPT-6.1 Sol
Un modèle quasi aussi performant que GPT-6.1 Astra pour le code et l'usage d'ordinateur, à un cinquième du prix de l'API.
Holo4 : un nouveau moteur pour les agents généralistes d'utilisation d'ordinateur
H Company dévoile Holo4, un modèle destiné à piloter des agents capables d'interagir avec des interfaces informatiques comme un humain.
Holo4 : le nouveau modèle de H Company pour les agents généralistes d'utilisation d'ordinateur
H Company dévoile Holo4, un modèle destiné à piloter des agents capables d'interagir avec des interfaces informatiques de façon autonome.
RecreationWorld : environnements évolutifs et vérifiables pour agents hybrides d'usage d'ordinateur
Un nouveau framework multi-plateforme entraîne des agents à mélanger interaction GUI et développement logiciel via des tâches de recréation vérifiables.
Affora : un système de design pour des interfaces adaptées aux agents
Un nouveau design system vise à rendre les interfaces logicielles plus lisibles par les agents IA, sans sacrifier l'expérience humaine.
GPT-6 Astra : la nouvelle génération d'intelligence pour le travail selon OpenAI
OpenAI dévoile GPT-6 Astra, son modèle le plus performant pour l'entreprise, avec raisonnement avancé et usage d'ordinateur.
BrowserForge : données d'agents web à grande échelle
Un framework génère des trajectoires d'interaction via des navigateurs parallèles pour entraîner des agents visuels.
Minecraft dans un bac à sable Windows pour agents
Un environnement de test Windows pour entraîner des agents informatiques sur Minecraft.
Induire des modèles de tâches à partir de traces d'utilisation d'ordinateur
Une méthode extrait des tâches imbriquées depuis des traces brutes d'écrans et d'actions, avec de fortes améliorations mesurées.
OSReward : évaluation standardisée des modèles de récompense
Un benchmark évalue la fiabilité des VLM comme juges d'agents informatiques.
Repenser le scaling à l'inférence pour les agents d'usage informatique en local : échecs et arbitrages de calcul
Une étude systématique montre que le calcul supplémentaire à l'inférence n'améliore pas toujours les agents CUA locaux, mais change surtout leur façon d'échouer.
Echoverse : des environnements profonds et évolutifs pour entraîner les agents informatiques
Microsoft Research crée douze mondes d'entraînement à haute fidélité pour agents d'usage informatique, doublant les performances d'un modèle 9B.
Desktop-Delta Bench : évaluer la compréhension des GUI par les IA
Un nouveau benchmark teste la capacité des modèles d'IA à comprendre les transitions d'interface graphique sur desktop.
Computer-use Agents
Une API pour des agents IA capables d'utiliser directement un ordinateur via le navigateur.
H Company lance une API pour agents à usage d'ordinateur
Le lab français dévoile une API permettant de déployer des agents IA capables d'interagir directement avec des interfaces informatiques.
H Company lance une API d'agents pour l'usage autonome d'ordinateurs
La start-up française dévoile une API permettant à des agents IA de piloter directement des interfaces informatiques.
Lancement des agents Computer-use en API managée par H Company
H Company propose ses agents capables de naviguer sur ordinateur via une API gérée, automatisant les workflows sur interfaces graphiques.
Lancement HN : Coasty (YC S26) — une API pour agents de computer-use
Une startup passée par Y Combinator dévoile une API destinée à faciliter le développement d'agents IA capables d'utiliser des ordinateurs.
DeepMind introduit le « computer use » dans Gemini 2.5 Flash
Google DeepMind lance la capacité de contrôle d'ordinateur pour Gemini 2.5 Flash, permettant au modèle d'interagir directement avec des interfaces graphiques.
Holo3.1 rend l'usage de l'ordinateur rapide et local
H Company publie Holo3.1, un modèle conçu pour l'usage de l'ordinateur (computer use) capable de fonctionner rapidement en local, sans dépendance cloud.