LLMsZDNET FR · 24 mars 2026, 05:03· 1 min de lecture

Anthropic franchit un cap : Claude prend le contrôle de votre ordinateur

Anthropic vient de franchir une étape majeure dans le développement des agents IA en dotant son modèle Claude d'une capacité inédite : prendre le contrôle d'un ordinateur comme le ferait un utilisateur humain. Baptisée "computer use", cette fonctionnalité permet à Claude de déplacer le curseur, cliquer sur des boutons, saisir du texte et naviguer dans des applications, sans passer par une API dédiée, mais en observant directement l'écran.

L'enjeu dépasse largement le gadget technique. Pour les entreprises, cela ouvre la voie à l'automatisation de tâches complexes jusqu'ici impossibles à déléguer à une machine : remplir des formulaires web, compiler des données depuis plusieurs logiciels, interagir avec des interfaces héritées. Pour les utilisateurs, c'est la promesse d'un assistant capable d'exécuter des séquences entières d'actions, pas seulement de répondre à des questions.

La fonctionnalité est disponible en version bêta via l'API Claude d'Anthropic, accessible aux développeurs. Le modèle utilisé est Claude 3.5 Sonnet, qui capture des captures d'écran à intervalles réguliers pour percevoir l'état de l'interface et planifier ses actions. Dans les benchmarks internes, Claude atteint un score de 14,9 % sur le test OSWorld, référence sectorielle pour l'évaluation des agents à interface graphique, contre 7,7 % pour les meilleurs modèles concurrents au moment de l'annonce. Des chiffres encore modestes, qu'Anthropic reconnaît elle-même, mais qui illustrent une progression nette.

La question de la sécurité reste néanmoins centrale. Anthropic avertit explicitement les développeurs de ne pas confier à Claude des accès sans surveillance à des données sensibles ou à des actions irréversibles. Le risque d'injection de prompt via des contenus malveillants affichés à l'écran constitue un vecteur d'attaque réel, que la communauté sécurité surveille de près. La course aux agents autonomes est lancée, Google, Microsoft et OpenAI travaillent sur des capacités similaires, mais la maturité opérationnelle n'est pas encore au rendez-vous.

Impact France/UE

Les entreprises européennes utilisant Claude devront évaluer les implications de sécurité avant d'adopter ces capacités d'automatisation autonome.

Dans nos dossiers

Anthropic Microsoft OpenAI Agents IA

Cet article vous a été utile ?

Vu une erreur factuelle dans cet article ? Signalez-la. Toutes les corrections valides sont publiées sur /corrections.

À lire aussi

1AI Business

Claude d'Anthropic peut désormais prendre le contrôle de votre ordinateur

Anthropic franchit une nouvelle étape dans la course aux agents IA en dotant son modèle Claude d'une capacité inédite : prendre le contrôle d'un ordinateur et interagir directement avec son interface graphique. Cette fonctionnalité place Claude parmi les rares modèles capables d'exécuter des tâches de façon autonome sur un PC, sans intervention humaine à chaque étape. Cette évolution s'inscrit dans une tendance de fond qui redéfinit le rôle des assistants IA, non plus de simples outils de génération de texte, mais de véritables agents personnels capables d'agir dans l'environnement numérique de l'utilisateur. Pour les entreprises comme pour les particuliers, l'enjeu est considérable : déléguer à une IA des workflows complexes, de la navigation web à la gestion de fichiers, en passant par l'interaction avec des logiciels tiers. Anthropic rejoint ainsi OpenAI et d'autres acteurs qui développent des capacités similaires de contrôle d'interface graphique (GUI control). La fonctionnalité repose sur la capacité du modèle à analyser visuellement l'écran, interpréter les éléments affichés et simuler des actions, clics, saisie clavier, défilement, comme le ferait un opérateur humain. Cette course aux agents autonomes soulève néanmoins des questions importantes en matière de sécurité et de contrôle des accès : confier à un modèle de langage le pilotage d'un système entier implique une surface d'attaque potentiellement élargie, un défi que les équipes d'Anthropic devront adresser au fil du déploiement.

UELes développeurs et entreprises européens peuvent désormais intégrer des capacités d'automatisation desktop via l'API Claude d'Anthropic.

OutilsActu

1 source

2Siècle Digital

Anthropic transforme Claude en assistant autonome capable d’agir sur votre ordinateur

Anthropic franchit une nouvelle étape dans l'évolution des assistants IA avec le lancement du « computer use » pour Claude. Cette fonctionnalité inédite permet à l'assistant d'interagir directement avec un ordinateur, déplacer le curseur, cliquer, saisir du texte, naviguer dans des applications, sans qu'aucune ligne de code ne soit nécessaire de la part de l'utilisateur. Claude devient ainsi un agent capable d'exécuter des tâches complexes de façon autonome sur un poste de travail réel. L'enjeu dépasse la simple démonstration technique. Déléguer des workflows entiers à une IA, remplir des formulaires, effectuer des recherches multi-onglets, automatiser des processus répétitifs, représente un changement structurel dans la façon dont les entreprises et les particuliers envisagent leur productivité. Pour le secteur, c'est la concrétisation d'une promesse longtemps restée théorique : l'IA non plus comme outil de génération de texte, mais comme collaborateur actif sur l'environnement numérique. Anthropic a introduit cette capacité via l'API Claude dans une version bêta destinée aux développeurs, leur permettant d'intégrer le « computer use » dans leurs propres applications. Claude peut interpréter des captures d'écran pour comprendre l'état de l'interface, puis enchaîner des actions en conséquence, une approche dite vision-action qui se distingue des automatisations scriptées traditionnelles. La société reconnaît que la fonctionnalité est encore expérimentale et sujette à des erreurs, notamment sur des interfaces complexes ou dynamiques. Les perspectives ouvertes par cette annonce alimentent déjà les débats sur l'avenir du travail numérique. Si Google et Microsoft explorent des territoires similaires avec leurs propres agents, Anthropic positionne Claude comme un acteur sérieux dans la course aux agents autonomes, un marché que les analystes considèrent comme l'un des plus transformateurs de la prochaine décennie en matière d'IA appliquée.

UELes professionnels et entreprises européens peuvent désormais déléguer des tâches informatiques complexes à Claude, avec des implications potentielles pour la réglementation sur les agents IA autonomes dans le cadre de l'AI Act.

LLMsActu

1 source

3The Decoder

Claude Code et Cowork permettent désormais à l'IA d'Anthropic de prendre le contrôle de votre ordinateur

Anthropic a annoncé que son assistant IA Claude est désormais capable de prendre directement le contrôle d'un ordinateur Mac ou Windows pour accomplir des tâches à la place de l'utilisateur. Cette fonctionnalité est intégrée à deux produits distincts : Claude Code, l'outil en ligne de commande destiné aux développeurs, et Cowork, une interface de collaboration homme-machine. Concrètement, Claude peut désormais naviguer dans des applications, manipuler des fichiers, remplir des formulaires ou exécuter des séquences d'actions complexes sur le bureau de l'utilisateur, sans intervention humaine à chaque étape. L'enjeu est considérable pour les professionnels techniques comme pour les usages grand public. Un développeur peut confier à Claude Code des tâches de refactorisation, de débogage ou de déploiement qui nécessitaient auparavant une attention manuelle constante. Pour les équipes utilisant Cowork, cela ouvre la voie à une véritable délégation de workflows entiers à l'IA, avec un gain de productivité potentiellement significatif. Cette capacité à agir dans un environnement graphique réel, et non seulement à générer du texte, représente un saut qualitatif dans l'utilité pratique des assistants IA. Cette annonce s'inscrit dans la continuité des travaux d'Anthropic sur le "computer use", une capacité expérimentale présentée fin 2024 via leur API, qui permettait déjà à Claude d'interagir avec des interfaces graphiques dans des environnements contrôlés. Le passage à une intégration native dans des produits grand public comme Claude Code et Cowork marque une étape de maturité. Anthropic entre ainsi en concurrence directe avec OpenAI et son opérateur d'ordinateur, ainsi qu'avec Microsoft Copilot, tous engagés dans la course aux agents IA capables d'agir de manière autonome sur les postes de travail.

UELes développeurs et entreprises européens peuvent désormais déléguer des workflows complets à l'IA via Claude Code et Cowork, sans attendre un équivalent européen — renforçant la dépendance du marché européen aux agents autonomes américains.

OutilsOutil

1 source

4The Verge AI

Claude Code et Cowork d'Anthropic peuvent contrôler votre ordinateur

Anthropic franchit un cap dans l'autonomie de ses outils IA : Claude Code et Claude Cowork peuvent désormais prendre le contrôle de votre ordinateur pour exécuter des tâches à votre place. Ouvrir des fichiers, naviguer sur le web, lancer des applications ou utiliser des outils de développement, tout cela sans aucune configuration préalable, y compris en votre absence. Cette fonctionnalité marque une évolution significative pour le secteur des agents IA dits "autonomes". Jusqu'ici, la plupart des assistants IA restaient cantonnés à la génération de texte ou de code. Avec le contrôle direct de l'interface utilisateur, Anthropic positionne Claude comme un véritable agent capable d'agir dans l'environnement réel de l'utilisateur, une avancée qui rapproche ces outils des promesses longtemps annoncées autour des agents logiciels. La fonctionnalité est disponible en préversion de recherche pour les abonnés Claude Pro et Claude Max. Le contrôle machine est pour l'instant limité à macOS. Techniquement, elle s'appuie sur des capacités d'interaction avec l'interface graphique introduites dès 2024 avec le modèle Claude 3.5 Sonnet, que Anthropic étend maintenant à ses outils conversationnels grand public. Cette ouverture progressive, préversion, macOS uniquement, abonnés premium, témoigne d'une approche prudente, consciente des risques liés à un agent disposant d'un accès complet au système. La question des garde-fous et du périmètre d'autorisation accordé à Claude sera centrale pour la suite du déploiement.

UELes abonnés européens de Claude Pro et Max pourront accéder à cette fonctionnalité d'automatisation desktop, bien que le déploiement reste limité à macOS pour l'instant.

OutilsOutil

1 source

Recevez l'essentiel de l'IA chaque jour

Une sélection éditoriale quotidienne, sans bruit. Directement dans votre boîte mail.

Recevez l'essentiel de l'IA chaque jour

Gratuit · 1 email le matin, l'essentiel de l'IA · désinscription en un clic