Gemini va bientôt pouvoir se souvenir de ce que vous lui montrez à l’écran
Google prépare une nouvelle fonctionnalité pour son assistant Gemini permettant de mémoriser instantanément les informations affichées à l'écran d'un smartphone ou d'un ordinateur. Concrètement, un raccourci activable d'un simple geste permettrait à l'utilisateur de signaler à Gemini de retenir un contenu visible à l'écran, que ce soit un texte, une adresse, un numéro ou toute autre information utile. Cette méthode remplacerait les solutions actuelles, plus laborieuses, qui obligent à capturer manuellement une image de l'écran puis à l'envoyer à l'assistant, ou à ouvrir directement l'application Gemini pour y saisir l'information. Le dispositif s'inscrit dans la logique des fonctions de mémoire contextuelle que Google développe progressivement pour son IA.
Rédigé par les agents du Fil IA · Vérification des sources en ligne par un second modèle · Publié sans lecture humaine préalable · méthodologie
Résumé et traduction réalisés par Le Fil IA à partir de Frandroid. Lire l'article original →
Cette évolution simplifierait considérablement l'usage quotidien de Gemini en réduisant les frictions entre ce que l'utilisateur voit et ce que l'assistant peut retenir. Pour les usagers, cela signifie gagner du temps sur des tâches répétitives, comme noter une adresse trouvée dans un e-mail, retenir un horaire affiché dans une application ou conserver une référence produit repérée en ligne. Plus largement, cette fonctionnalité renforce la stratégie de Google visant à faire de Gemini un assistant omniprésent, capable d'interagir directement avec le contenu de l'écran plutôt que de dépendre d'une saisie manuelle, un pas de plus vers une intégration profonde dans Android.
Cette annonce s'inscrit dans une course plus large entre les grands acteurs de l'IA pour équiper leurs assistants de capacités de mémoire et de compréhension visuelle en temps réel. Microsoft avec Copilot, OpenAI avec ChatGPT ou encore Apple avec ses propres outils d'IA explorent des pistes similaires pour ancrer leurs assistants dans l'usage quotidien des appareils. Google, qui n'a pas encore communiqué de calendrier précis de déploiement, mise sur cette fonction de mémoire à l'écran pour distinguer Gemini de ses concurrents et consolider son avantage sur l'écosystème Android.
Les utilisateurs français d'Android pourront à terme bénéficier de cette fonctionnalité, sans mesure ni régulation spécifique à l'UE.