Google rend Gemini beaucoup plus conscient de ce qui se passe dans Chrome. La société a commencé à déployer une nouvelle fonctionnalité « Sélectionner à partir de l'écran » qui permet aux utilisateurs de mettre en évidence du texte ou des images spécifiques d'une page Web et de les envoyer directement à Gemini, rendant ainsi les conversations avec l'assistant IA beaucoup plus contextuelles.
Gemini peut désormais se concentrer exactement sur ce que les utilisateurs souhaitent poser
La nouvelle fonctionnalité apparaît dans Gemini dans le menu « + » de Chrome et fonctionne un peu comme un outil de capture d'écran intégré. Une fois activé, les utilisateurs peuvent sélectionner n'importe quel texte ou image visible dans l'onglet actuel du navigateur, qui est ensuite automatiquement joint à une invite Gemini. Au lieu de décrire manuellement le contenu d'une page Web, les utilisateurs peuvent simplement indiquer à Gemini le contenu exact pour lequel ils souhaitent obtenir de l'aide.
Google déploie cette fonctionnalité dans le cadre de Chrome 149, bien que certains utilisateurs devront peut-être redémarrer leur navigateur avant qu'elle n'apparaisse. La mise à jour poursuit les efforts de Google pour que Gemini se sente moins comme un chatbot autonome que comme un assistant conscient de ce que font activement les utilisateurs.
Le timing est également intéressant car Google a annoncé une autre mise à jour majeure de Gemini le même jour. Les développeurs peuvent désormais accéder aux fonctionnalités d'utilisation de l'ordinateur directement via Gemini 3.5 Flash, permettant aux agents d'IA de voir, de raisonner et d'effectuer des actions dans les navigateurs, les applications mobiles et les environnements de bureau sans s'appuyer sur un modèle distinct. Google affirme que l'intégration améliore les tâches à long terme telles que les tests de logiciels, les flux de travail d'entreprise et d'autres tâches d'automatisation en plusieurs étapes.
Cela ressemble à la réponse de Google à « L'IA devrait savoir ce que je regarde »
Il est intéressant de noter que cette mise à jour concerne moins une nouvelle fonctionnalité que la suppression des frictions. En permettant à Gemini de comprendre exactement ce qui est à l'écran et d'interagir directement avec lui, Google va au-delà de l'expérience de chatbot traditionnelle vers un assistant IA capable de comprendre le contexte, d'anticiper l'intention et d'aider les utilisateurs à accomplir des tâches plutôt que de simplement répondre aux questions.
