OutilsThe Verge AI · 12 mars 2026, 17:59· 1 min de lecture

L'automatisation des tâches par Gemini est là, et c'est bluffant

Google et Samsung lancent en bêta une fonctionnalité d'automatisation de tâches via Gemini sur le Galaxy S26 Ultra, permettant à l'IA d'utiliser des applications (livraison de repas, VTC) de façon autonome dans une fenêtre virtuelle. Activée par de simples instructions texte, elle prend en charge des actions comme commander un repas ou réserver un trajet. La démonstration en conditions réelles donne une impression déconcertante de voir son téléphone "s'utiliser tout seul".

Dans nos dossiers

Gemini

Cet article vous a été utile ?

Vu une erreur factuelle dans cet article ? Signalez-la. Toutes les corrections valides sont publiées sur /corrections.

À lire aussi

1The Verge AI

L'automatisation des tâches par Gemini est lente, maladroite et vraiment impressionnante

Gemini franchit un cap symbolique sur mobile en prenant littéralement le contrôle des applications à la place de l'utilisateur. Testé sur le Pixel 10 Pro et le Galaxy S26 Ultra, cette nouvelle fonctionnalité d'automatisation des tâches permet à l'assistant IA de naviguer dans des apps, passer des commandes et déclencher des actions sans intervention humaine, une première sur smartphone grand public. L'enjeu dépasse la simple commodité. Depuis des années, les assistants vocaux promettent une interaction naturelle avec le téléphone mais se cantonnent à des réponses textuelles ou à des raccourcis basiques. Avec cette approche, Google tente de concrétiser la vision d'un agent IA véritablement opérationnel, capable d'agir dans des interfaces conçues pour les humains, ce que l'industrie appelle l'"agentic AI". Pour l'heure, la fonctionnalité reste en version bêta et limitée à un nombre restreint de services : quelques plateformes de livraison de repas et d'applications de transport. L'expérience est décrite comme lente et parfois maladroite. Elle ne résout aucun problème urgent que l'utilisateur ne pouvait déjà gérer seul. Mais le principe fonctionne, hors démo contrôlée, hors keynote soigneusement scénarisée. C'est précisément ce dernier point qui marque une rupture. Les démonstrations d'agents IA sur mobile ont longtemps semblé prometteuses sur scène avant de décevoir en conditions réelles. Que Gemini y parvienne, même imparfaitement, sur du matériel commercialisé suggère que l'automatisation contextuelle sur smartphone n'est plus un horizon lointain, mais une trajectoire engagée.

OutilsOutil

1 source

2AWS ML Blog

Amazon Nova Act accélère la livraison logicielle grâce à l'automatisation des tests par agents

Amazon a lancé Nova Act, un service AWS conçu pour automatiser les tests d'assurance qualité (QA) dans les pipelines de livraison logicielle. Contrairement aux frameworks traditionnels qui s'appuient sur des sélecteurs CSS, des identifiants d'éléments ou des références structurelles pour naviguer dans les interfaces, Nova Act utilise un modèle de compréhension visuelle et le langage naturel, exactement comme le ferait un utilisateur humain. La solution s'accompagne de QA Studio, une interface de référence incluant un frontend web, une API et une CLI, construite sur une infrastructure serverless AWS. Les équipes peuvent y créer des suites de tests via un assistant de parcours utilisateur, déclencher des exécutions à la demande, les planifier ou les intégrer directement dans leurs pipelines CI/CD. L'ensemble s'appuie sur Amazon Bedrock AgentCore Browser pour la prévisualisation en direct et AWS Secrets Manager pour la saisie sécurisée des données sensibles. L'enjeu est considérable pour les équipes produit et engineering. Dans les organisations actuelles, les critères d'acceptance sont définis par les product managers en langage métier, implémentés par les développeurs, puis retranscrits en code d'automatisation, souvent par ces mêmes développeurs. Ce fossé entre ceux qui comprennent les besoins utilisateurs et ceux qui maintiennent les tests crée une dette technique permanente : chaque refactoring d'interface ou ajustement de layout casse des dizaines de tests, même quand les fonctionnalités restent intactes. Nova Act supprime ce goulot d'étranglement en permettant à n'importe quel membre de l'équipe, y compris des non-développeurs, de rédiger et maintenir des tests en langage naturel. Quand un designer déplace un bouton ou qu'un développeur restructure un composant React, les tests s'adaptent automatiquement sans intervention manuelle. Cette annonce s'inscrit dans une course plus large des grands fournisseurs cloud à proposer des agents capables d'interagir avec des interfaces graphiques. OpenAI avec Operator, Anthropic avec Computer Use, et désormais AWS avec Nova Act ciblent tous le même marché : remplacer les scripts d'automatisation fragiles par des agents visuels autonomes. Pour AWS, l'intégration native dans l'écosystème Bedrock et les services managés représente un avantage compétitif face aux solutions standalone. Le marché du test logiciel automatisé pèse plusieurs milliards de dollars et souffre d'un taux d'échec élevé des projets d'automatisation traditionnels, souvent abandonnés après quelques mois faute de ressources pour maintenir les scripts. Si Nova Act tient ses promesses de résilience aux changements UI, il pourrait redistribuer significativement les cartes dans ce secteur et accélérer l'adoption de l'approche "shift-left" où les tests sont écrits dès la définition des exigences.

UELes équipes engineering européennes utilisant AWS peuvent intégrer Nova Act dans leurs pipelines CI/CD, mais aucun impact réglementaire ou institutionnel direct sur la France ou l'UE.

OutilsOutil

1 source

3Blog du Modérateur

My Computer : Manus permet à son agent IA d’automatiser des tâches sur votre ordinateur

Manus franchit une nouvelle étape dans la course aux agents IA avec le lancement de My Computer, une application desktop qui connecte directement son agent à l'ordinateur de l'utilisateur. Disponible sur macOS et Windows, cette solution permet d'automatiser des tâches impliquant des fichiers et applications locaux, sans passer par le cloud. L'enjeu est considérable : jusqu'ici, la plupart des agents IA opéraient dans des environnements distants ou sandboxés, limités aux tâches web. En donnant accès au poste de travail réel de l'utilisateur, Manus positionne son agent comme un véritable assistant de productivité capable d'interagir avec l'ensemble de l'écosystème logiciel local, tableurs, éditeurs de texte, outils métiers, système de fichiers. La fonctionnalité My Computer s'inscrit dans la stratégie d'expansion rapide de Manus, la startup chinoise qui avait fait sensation début 2025 en lançant l'un des premiers agents IA généralistes accessibles au grand public. L'application desktop prolonge les capacités déjà reconnues de l'agent sur les tâches web et de recherche, en les étendant à l'environnement natif de l'utilisateur, là où se concentre l'essentiel du travail quotidien. Cette annonce s'inscrit dans une compétition intense sur le segment des agents desktop, où Anthropic (avec Claude), OpenAI et Microsoft investissent massivement. L'accès direct au système local soulève néanmoins des questions légitimes de sécurité et de confidentialité, un point que Manus devra adresser clairement pour convaincre les utilisateurs professionnels.

OutilsOutil

1 source

4Le Big Data

Automatisation du montage vidéo : créez des vidéos 10x plus vite avec l’IA

Les outils d'intelligence artificielle dédiés au montage vidéo permettent désormais de réduire jusqu'à 40 % du temps de post-production traditionnel en moins de soixante secondes. Des plateformes comme Submagic, qui se positionne aujourd'hui comme le leader du segment, automatisent l'intégralité du workflow : analyse audio à l'importation pour isoler les moments forts, suppression automatique des silences et hésitations, insertion contextuelle de B-rolls et d'éléments graphiques basés sur la transcription générée, et même zoom dynamique sur les pics d'intensité émotionnelle détectés dans la voix. Ce qui prenait autrefois une demi-journée de dérushing manuel se boucle en quelques minutes, avec une précision que les éditeurs décrivent comme chirurgicale. L'enjeu est considérable pour les créateurs de contenu, solopreneurs comme studios en croissance, qui font face à une demande de formats courts qui ne faiblit pas. En déléguant les tâches répétitives et chronophages à des algorithmes entraînés pour ça, ils récupèrent du temps pour la stratégie et la direction créative, les seules dimensions que la machine ne peut pas encore pleinement remplacer. Concrètement, la barrière économique et humaine qui séparait une production amateur d'une post-production de haute volée s'effondre : un créateur seul peut désormais sortir un volume de contenu qui nécessitait auparavant une équipe entière. Cette mutation s'inscrit dans une transformation plus large de l'industrie de la création visuelle, accélérée par la montée en puissance des LLMs et des modèles multimodaux depuis 2022-2023. Le marché des outils d'automatisation vidéo s'est densifié rapidement, avec des acteurs comme Descript, CapCut ou Runway qui se disputent les mêmes flux de travail. Submagic mise sur la régularité de ses mises à jour et sur l'intégration verticale de ses fonctionnalités pour se démarquer. La prochaine frontière concerne la personnalisation à grande échelle : configurer un système qui comprend non seulement la structure narrative d'une vidéo, mais aussi les codes esthétiques et la ligne éditoriale propres à chaque créateur. Ce degré de personnalisation reste encore largement en développement, et représente le prochain terrain de compétition pour ces plateformes.

OutilsOutil

1 source

Recevez l'essentiel de l'IA chaque jour

Une sélection éditoriale quotidienne, sans bruit. Directement dans votre boîte mail.

Recevez l'essentiel de l'IA chaque jour

Gratuit · 1 email le matin, l'essentiel de l'IA · désinscription en un clic