Aller au contenu principal
Chronicle : cette nouveauté qui permet à Codex de comprendre votre écran
OutilsLe Big Data · 2 min de lecture

Chronicle : cette nouveauté qui permet à Codex de comprendre votre écran

Source originale ↗·

OpenAI a lancé le 20 avril 2026 une fonctionnalité expérimentale baptisée Chronicle, intégrée à Codex, son assistant de programmation basé sur l'IA. Chronicle capture le contenu récent affiché à l'écran de l'utilisateur pour enrichir automatiquement la mémoire de Codex. Concrètement, l'outil observe ce qui est visible en temps réel, qu'il s'agisse d'un bug dans un éditeur de code, d'un message Slack, d'un fichier ouvert ou d'un workflow en cours, et construit à partir de ces éléments un contexte exploitable sans que l'utilisateur n'ait besoin de le décrire manuellement. La fonctionnalité fait suite à une préversion des "mémoires" dans Codex sortie la semaine précédente, et reste pour l'instant réservée aux abonnés ChatGPT Pro sur macOS, avec certaines régions encore exclues.

L'enjeu est de supprimer une friction fondamentale dans l'utilisation des assistants IA : la nécessité de re-contextualiser à chaque session. Jusqu'ici, un développeur devait expliquer à Codex ce sur quoi il travaillait, lui rappeler les fichiers concernés, les erreurs rencontrées, les interlocuteurs impliqués. Chronicle élimine cette répétition en observant directement l'environnement de travail. Codex peut ainsi détecter une erreur dans un projet, localiser les logs associés et agir sans interruption. Il retient également les habitudes de l'utilisateur, les outils préférés, les méthodes de travail, créant progressivement une expérience personnalisée proche de celle d'un assistant humain qui aurait passé des semaines à observer comment vous travaillez.

Ce type de fonctionnalité place néanmoins OpenAI sur un terrain délicat. Pour fonctionner, Chronicle exige des autorisations étendues : enregistrement d'écran, accès aux fonctionnalités système. Les captures sont temporaires et disparaissent au bout de quelques heures, mais les souvenirs générés sont stockés localement sous forme de fichiers non chiffrés, accessibles potentiellement par d'autres programmes. Un utilisateur inattentif peut ainsi exposer des données sensibles capturées à l'écran sans s'en rendre compte. Par ailleurs, les agents fonctionnant en arrière-plan consomment rapidement les ressources allouées, ce qui contraint l'usage dans cette phase expérimentale. OpenAI se retrouve dans la position classique des acteurs qui veulent proposer une IA véritablement contextuelle, mais doivent le faire sans heurter les exigences de vie privée d'utilisateurs de plus en plus vigilants. Chronicle constitue une étape vers l'assistant ambiant dont l'industrie parle depuis des années, mais sa généralisation dépendra autant de sa robustesse technique que de la confiance que les utilisateurs voudront bien lui accorder.

Impact France/UE

Certaines régions restant exclues au lancement, les utilisateurs européens pourraient être bloqués en raison des exigences du RGPD sur la collecte de données d'écran et le stockage local non chiffré.

Dans nos dossiers

Cet article vous a été utile ?

Vu une erreur factuelle dans cet article ? Signalez-la. Toutes les corrections valides sont publiées sur /corrections.

À lire aussi

Claude Code et Cowork permettent désormais à l'IA d'Anthropic de prendre le contrôle de votre ordinateur
1The Decoder 

Claude Code et Cowork permettent désormais à l'IA d'Anthropic de prendre le contrôle de votre ordinateur

Anthropic a annoncé que son assistant IA Claude est désormais capable de prendre directement le contrôle d'un ordinateur Mac ou Windows pour accomplir des tâches à la place de l'utilisateur. Cette fonctionnalité est intégrée à deux produits distincts : Claude Code, l'outil en ligne de commande destiné aux développeurs, et Cowork, une interface de collaboration homme-machine. Concrètement, Claude peut désormais naviguer dans des applications, manipuler des fichiers, remplir des formulaires ou exécuter des séquences d'actions complexes sur le bureau de l'utilisateur, sans intervention humaine à chaque étape. L'enjeu est considérable pour les professionnels techniques comme pour les usages grand public. Un développeur peut confier à Claude Code des tâches de refactorisation, de débogage ou de déploiement qui nécessitaient auparavant une attention manuelle constante. Pour les équipes utilisant Cowork, cela ouvre la voie à une véritable délégation de workflows entiers à l'IA, avec un gain de productivité potentiellement significatif. Cette capacité à agir dans un environnement graphique réel, et non seulement à générer du texte, représente un saut qualitatif dans l'utilité pratique des assistants IA. Cette annonce s'inscrit dans la continuité des travaux d'Anthropic sur le "computer use", une capacité expérimentale présentée fin 2024 via leur API, qui permettait déjà à Claude d'interagir avec des interfaces graphiques dans des environnements contrôlés. Le passage à une intégration native dans des produits grand public comme Claude Code et Cowork marque une étape de maturité. Anthropic entre ainsi en concurrence directe avec OpenAI et son opérateur d'ordinateur, ainsi qu'avec Microsoft Copilot, tous engagés dans la course aux agents IA capables d'agir de manière autonome sur les postes de travail.

UELes développeurs et entreprises européens peuvent désormais déléguer des workflows complets à l'IA via Claude Code et Cowork, sans attendre un équivalent européen — renforçant la dépendance du marché européen aux agents autonomes américains.

OutilsOutil
1 source
Google Chrome : Gemini peut désormais analyser ce qui s’affiche sur votre écran
2Le Big Data 

Google Chrome : Gemini peut désormais analyser ce qui s’affiche sur votre écran

Google a déployé une nouvelle fonctionnalité dans Chrome à partir de la version 149 : baptisée « Sélectionner depuis l'écran », elle permet d'interagir avec Gemini en désignant directement une zone visible sur une page web, plutôt que de la décrire par écrit. Concrètement, depuis le panneau latéral Gemini, accessible via le bouton « Demander à Gemini » en haut du navigateur, l'utilisateur clique sur le bouton « + » puis choisit l'option de sélection. Il trace ensuite un cadre autour de l'élément qui l'intéresse : un paragraphe, une image, un graphique, un schéma technique, la photo d'un produit. Plusieurs zones peuvent être sélectionnées au cours d'une même session pour comparer des éléments entre eux. La mise à jour est gratuite et ne nécessite aucune configuration particulière, juste un redémarrage du navigateur après installation. Ce changement simplifie radicalement l'usage quotidien de l'IA dans un navigateur. Jusqu'ici, interroger Gemini sur un contenu affiché à l'écran obligeait à recopier du texte, à faire une capture d'écran ou à rédiger une description détaillée, des étapes fastidieuses quand l'élément ciblé est complexe ou visuellement dense. En supprimant cette friction, Google rend l'assistant nettement plus utile pour les professionnels qui consultent des rapports, des tableaux de bord, des articles techniques ou des fiches produits. La capacité à pointer directement un objet visuel et à demander une explication, une comparaison ou une transformation accélère les flux de travail d'analyse sans quitter l'onglet en cours. Cette fonction s'inscrit dans la stratégie de Google visant à étendre au bureau les interactions gestuelles popularisées sur mobile. Circle to Search, lancé sur Android, avait démontré l'efficacité de désigner un élément à l'écran plutôt que de le verbaliser ; Google transfère désormais cette logique dans Chrome, son navigateur utilisé par plus de 65 % des internautes mondiaux. Dans un contexte de concurrence intense entre Copilot (Microsoft Edge), ChatGPT et les assistants intégrés de Safari, chaque gain d'ergonomie compte pour fidéliser les utilisateurs à l'écosystème Google. L'intégration de Gemini directement dans le navigateur, sans extension tierce, représente un avantage structurel que Google entend exploiter pour imposer son assistant comme couche d'interaction par défaut entre l'utilisateur et le web.

OutilsOutil
1 source
Android 17 : Gemini ne vous lâchera plus d’une semelle grâce à cette nouveauté
3Le Big Data 

Android 17 : Gemini ne vous lâchera plus d’une semelle grâce à cette nouveauté

Google prépare une nouveauté significative pour Android 17 : l'assistant Gemini pourra désormais s'afficher sous la forme d'une bulle flottante persistante, visible en superposition par-dessus toutes les autres applications. La fonctionnalité, repérée le 18 juin 2026 dans la version bêta d'Android 17 par le site 9to5Google, s'inspire directement du système de bulles de discussion popularisé par Facebook Messenger. Concrètement, l'utilisateur engage une conversation avec Gemini, réduit la fenêtre sans la fermer, et retrouve instantanément le fil des échanges en touchant la bulle flottante, quelle que soit l'application ouverte à ce moment-là. Pour clore la session, un simple glissement de la bulle vers le bas de l'écran suffit. Ce changement simplifie radicalement le multitâche sur mobile. Jusqu'ici, basculer vers une autre application signifiait interrompre la conversation avec Gemini et devoir la relancer depuis zéro. La bulle flottante supprime cette friction : l'utilisateur peut consulter un article, répondre à un email ou naviguer sur le web pendant qu'une question est en cours de traitement, puis revenir à Gemini sans perte de contexte. Pour les professionnels qui utilisent l'assistant comme outil de productivité, rédaction, recherche rapide, synthèse de documents, l'impact est concret et immédiat. L'assistant cesse d'être une application parmi d'autres pour devenir une couche permanente accessible à tout moment du système d'exploitation. Cette évolution s'inscrit dans une tendance que tous les grands acteurs du secteur suivent simultanément. Meta a déjà intégré son IA dans Messenger, WhatsApp et Instagram, selon une logique de présence continue dans les espaces où les utilisateurs passent leur temps. Google adopte une stratégie différente mais complémentaire : plutôt que d'ancrer l'IA dans des applications spécifiques, il l'injecte directement dans la couche système d'Android, lui donnant accès à l'ensemble des contextes d'utilisation. Gemini bénéficie ainsi d'une accessibilité structurelle qu'aucune application tierce ne peut concurrencer. La fonctionnalité n'est pas encore disponible en version stable, mais sa présence dans la bêta d'Android 17 annonce un déploiement prochain. La question n'est plus de savoir si les assistants IA vont s'imposer comme présence permanente sur mobile, mais à quelle vitesse les utilisateurs adapteront leurs usages à cette disponibilité constante.

UELes utilisateurs Android en France et dans l'UE verront Gemini s'imposer comme couche permanente de leur OS mobile lors du déploiement d'Android 17 stable.

OutilsOutil
1 source
Codex : plus besoin d’être collé à votre PC, l’IA de code arrive sur mobile
4Le Big Data 

Codex : plus besoin d’être collé à votre PC, l’IA de code arrive sur mobile

OpenAI a annoncé le 14 mai 2026 l'intégration de Codex dans l'application mobile ChatGPT, disponible sur iOS et Android. L'outil, jusqu'ici réservé aux environnements de bureau, peut désormais être piloté depuis un smartphone. Concrètement, Codex se connecte à la machine principale de l'utilisateur, PC portable, serveur dédié ou environnement distant, et affiche en temps réel l'état des tâches en cours : résultats de tests, sorties terminal, captures d'écran, validations et modifications de projet. Il ne s'agit pas de faire tourner un environnement de développement complet sur téléphone, mais de transformer le smartphone en tableau de bord portable pour superviser et orienter des tâches qui s'exécutent ailleurs. L'enjeu pratique est clair : les développeurs qui utilisent des agents d'IA autonomes se heurtent régulièrement au même problème. Ces agents peuvent travailler plusieurs dizaines de minutes, voire plusieurs heures, sans intervention humaine, mais ils finissent inévitablement par avoir besoin d'un arbitrage : choisir entre deux solutions techniques, approuver une action sensible, fournir du contexte supplémentaire. Jusqu'ici, cela imposait de retourner à son poste. Avec Codex sur mobile, il devient possible de lancer une analyse de bug avant de quitter le bureau, de suivre l'exécution depuis un taxi, et d'approuver une commande critique sans rouvrir tout son environnement de travail. OpenAI met en avant la sécurité du dispositif : la machine n'est pas exposée directement à Internet, la synchronisation entre appareils passant par une couche de relais sécurisée. Cette annonce s'inscrit dans une tendance plus large où les grands acteurs de l'IA, OpenAI en tête, cherchent à étendre leurs outils au-delà du seul écran d'ordinateur. Codex, initialement présenté comme un agent de codage autonome capable de gérer des tâches complexes sur des dépôts GitHub, monte progressivement en puissance depuis son lancement. L'intégration mobile est encore en préversion, mais elle signale une ambition claire : faire de l'IA de code un outil disponible en permanence, quel que soit le contexte. Pour l'industrie, cela accentue la pression sur les concurrents comme GitHub Copilot ou Cursor, qui n'ont pas encore poussé aussi loin l'expérience nomade. Pour les développeurs, la question n'est plus de savoir si l'IA va s'intégrer dans leurs outils quotidiens, mais à quelle vitesse elle va coloniser chaque surface disponible, y compris les six pouces de leur poche.

💬 Personne n'attendait un IDE sur téléphone. Ce qu'on voulait, c'est pouvoir débloquer un agent depuis le taxi à 19h sans rouvrir son laptop, et là OpenAI coche la case. Bon, faut encore vérifier ce que vaut vraiment cette "couche de relais sécurisée" dont ils parlent.

OutilsOutil
1 source

Recevez l'essentiel de l'IA chaque jour

Une sélection éditoriale quotidienne, sans bruit. Directement dans votre boîte mail.

Recevez l'essentiel de l'IA chaque jour

Gratuit · 1 email le matin, l'essentiel de l'IA · désinscription en un clic