Gemini pour Mac contrôle vos applications via l’ordinateur

Gemini app for Mac adds computer use to control desktop apps

Pour les créatifs, les artisans du numérique et les multitâches qui jonglent quotidiennement entre plusieurs applications, une petite révolution se profile sur Mac. Gemini, l’assistant intelligent de Google, évolue bien au-delà du simple chatbot. Désormais, il peut prendre le contrôle de votre souris et de votre clavier pour accomplir des tâches complexes à votre place, directement dans vos logiciels de bureau.

Finis les clics répétitifs et la saisie manuelle fastidieuse. Imaginez : vous demandez à Gemini de préparer une présentation. Il va lui-même ouvrir vos tableaux de bord en ligne, capturer les données et les graphiques, puis tout assembler dans Google Slides. Tout cela se déroule dans une fenêtre isolée en arrière-plan, sans perturber votre propre navigation.

Badge Google Preferred Source

Comment Gemini agit sur votre bureau

La fonction, baptisée « Computer use », transforme fondamentalement l’interaction avec votre machine. Auparavant, Gemini ne pouvait accéder qu’aux fichiers locaux via des applications connectées comme Gmail. Désormais, il interagit avec n’importe quelle appli installée sur votre Mac, du logiciel de modélisation 3D Blender à votre client Git.

Le processus est simple et garde l’utilisateur aux commandes. Pour lancer une action, il suffit d’ajouter @Computer use à votre prompt. L’assistant ouvre alors une fenêtre de prévisualisation en direct de ses actions. Un simple clic permet de l’arrêter à tout moment. Google a intégré des garde-fous, comme une pause automatique devant les champs de mot de passe ou de paiement.

Beaucoup de tâches quotidiennes s’étendent sur des apps de bureau et des sites web qui ne communiquent pas entre eux. L’utilisation informatique gère les étapes fastidieuses en arrière-plan pour vous faire gagner du temps sans sacrifier votre écran ou votre curseur.

Des cas concrets qui changent la donne

Cette capacité ouvre la porte à une automatisation inédite pour des workflows spécialisés. Un photographe pourrait demander à Gemini d’appliquer un filtre de colorimétrie spécifique à un lot de cent photos dans Lightroom. Un vendeur en ligne pourrait automatiser la création de fiches produit à partir d’un dossier d’images.

Parmi les exemples les plus parlants : extraire automatiquement le poids et l’adresse d’un bon de commande PDF pour remplir un devis d’expédition. Ou encore, analyser une pile de vêtements, rechercher les prix du marché et pré-remplir des annonces sur Vinted ou eBay. C’est un gain de temps colossal sur des processus manuels chronophages.

La fonctionnalité est disponible dès aujourd’hui, mais avec quelques restrictions. Elle n’est ouverte qu’aux abonnés américains des offres Google AI Plus, Pro et Ultra, et fonctionne uniquement en anglais. Son déploiement vers d’autres régions et langues devrait suivre, marquant une étape clé vers l’assistant numérique véritablement omniprésent.