Après avoir déployé Gemini Spark sur macOS plus tôt cette année, Google met actuellement à niveau l'application Gemini pour Mac avec deux fonctionnalités utiles qui pourraient changer la façon dont vous faites les choses, qu'il s'agisse d'abandonner votre application de dictée IA actuelle ou de laisser Gemini agir sur tout ce qui est sur votre écran.
Une simple pression sur une touche transforme la parole en texte clair n'importe où
Avec la dernière mise à jour, vous pouvez appuyer longuement sur la touche Fn dans n'importe quelle fenêtre ouverte et commencer à parler. Gemini transcrit ce que vous dites en texte clair directement sur votre curseur, en supprimant les mots de remplissage comme « ums » et « ahs » au fur et à mesure. La fonctionnalité est activée par défaut, il n'y a donc rien à configurer au préalable et elle fonctionne dans tout le système, vous permettant de taper un e-mail, de répondre à un message Slack ou de rédiger un document.
Les applications de dictée IA comme Wispr Flow et Willow font déjà quelque chose de similaire, nettoyant la langue parlée et déposant du texte soigné là où se trouve votre curseur. Mais ils nécessitent un téléchargement séparé et, dans certains cas, un abonnement. Maintenant que la même idée est directement intégrée à l'application Gemini, un outil de dictée autonome peut sembler inutile pour les utilisateurs Mac qui l'utilisent déjà.
La fonctionnalité de dictée est déployée à l’échelle mondiale pour tous les utilisateurs de l’application Gemini sur macOS. Il prend actuellement en charge la dictée en anglais, mais Google indique que d'autres langues seront ajoutées plus tard cette année.
Les Gémeaux peuvent désormais voir ce qui est sur votre écran et agir en conséquence
Parallèlement à la dictée à l'échelle du système, l'application Gemini pour Mac a acquis un raisonnement sensible à l'écran. Cette fonctionnalité opt-in permet à Gemini de lire vos fenêtres actives et de les utiliser comme contexte pour traiter des demandes plus complexes. Par exemple, vous pouvez mettre en surbrillance une page de notes brouillons et demander à Gemini de les transformer en résumé, et il réécrira le texte et le placera exactement là où se trouve votre curseur.
Google a également montré un exemple plus complexe, dans lequel un utilisateur planifiant un dîner d'équipe a demandé à Gemini de vérifier les fichiers en surbrillance pour obtenir des détails sur la politique budgétaire et les restrictions alimentaires, et de rédiger un e-mail de rappel basé sur ces détails. La même demande a également amené Gemini à extraire les recommandations des magasins de boba à proximité de Google Maps pour les ajouter en post-scriptum à l'e-mail.
Avec ces nouvelles fonctionnalités, Gemini sur Mac va au-delà des simples réponses. Il s'agit désormais d'un outil plus performant, capable de transcrire la parole et d'agir sur ce qui est sur votre écran, plaçant Google bien devant Apple, dont la propre refonte de Siri avec des capacités similaires n'a toujours pas été livrée.
