# Google Gemini — « Screen Automation » : la nouvelle frontière de l’assistance IA
## 1. L’essentiel
**Google Gemini** inaugure la **« screen automation »**, une technologie capable d’exécuter automatiquement des gestes (clics, saisies, validations) dans les applications **Android** affichées à l’écran.
- L’utilisateur formule une requête vocale ou textuelle : *« Commande-moi un poké »*.
- Gemini analyse l’écran, ouvre l’appli de livraison, sélectionne le restaurant, valide le panier et règle la commande.
- Tout se fait **sans intervention manuelle**, mais l’utilisateur peut suivre l’action en direct et reprendre la main à tout moment.
Chiffre-clé : plus de **3,5 milliards d’appareils Android actifs** (stat. Alphabet 2023) sont concernés à terme.
## 2. Lieux d’intérêt à proximité
*(Dans l’écosystème Android, plutôt que dans un quartier physique)*
### Restaurants
- Applis de livraison : Uber Eats, DoorDash, **Deliveroo**.
- Gemini peut naviguer, appliquer un bon de réduction, choisir l’adresse.
### Bars & cafés
- Services de coffee pick-up : Starbucks, Costa, Pret.
- Suggestion contextuelle d’happy hours grâce au couplage agenda + géoloc.
### Boutiques & shopping
- Amazon, Walmart, Carrefour : achat d’articles récurrents en un seul swipe virtuel.
### Rues et promenades
- Applications de **ride-hailing** : Uber, Lyft, Bolt.
- Gemini réserve le trajet, suit l’arrivée du véhicule et ajuste l’itinéraire en temps réel.
### Hôtels & hébergements
- Booking, Airbnb, Expedia : remplissage automatique des formulaires, tri par budget.
### Activités culturelles
- Billetteries : Ticketmaster, Fnac Spectacles, Eventbrite.
- L’IA compare les prix, applique la meilleure offre.
### Espaces publics et plein air
- Maps, AllTrails : planification de randonnées, ajout de rappels météo.
## 3. L’histoire du lieu
La « screen automation » apparaît dans la bêta **17.4** de l’appli Google sous le nom de code **Bonobo**. Inspirée des travaux internes sur *taskonomy* et *agentic AI*, elle constitue la synthèse de :
- 10 ans de Google Assistant,
- Les capacités de **Large Language Model** (LLM) de Gemini,
- L’API Android Accessibility Service, détournée ici pour un usage proactif.
## 4. L’histoire du nom
« Gemini » fait référence au programme spatial *Gemini* de la NASA (années 60), symbole de coopération **homme-machine** et de pas de géant entre Mercury et Apollo. Google réutilise cet imaginaire d’étape intermédiaire vers l’« IA générale ».
## 5. Infos sur la station
*(Comprendre : l’« application Google » sur Android)*
### Accès et correspondances
- App pré-installée sur Android 12+.
- Disponible via **Hey Google** ou le widget de recherche.
### Sorties principales
- Lancement direct depuis le **panneau latéral** (edge gesture).
- Activation suite à une capture d’écran interprétée.
### Horaires
- Service 24 h/24, dépend toutefois d’un accès réseau stable.
### Accessibilité et services
- Compatible lecteur d’écran TalkBack.
- Commandes vocales, scripts personnalisés à venir.
### Sécurité et flux
- Les actions sont *sandboxées* ; l’utilisateur valide les permissions au premier lancement.
- **Captures d’écran anonymisées** envoyées à Google pour revue qualité (opt-out possible).
## 6. Infos en temps réel
> Les widgets ci-dessous sont fournis pour maintenir une structure homogène.
> Aucune donnée « trafic » n’est requise dans le contexte d’une fonctionnalité logicielle.
- **widget_next_trains**
- _Données non disponibles pour une application mobile._
- **widget_trafic**
- _Pas de perturbation signalée sur les serveurs Gemini._
- **widget_affluence**
- _Charge serveur estimée : normale._
## 7. FAQ
**Qu’est-ce que la screen automation de Google Gemini ?**
Un module qui imite vos interactions (tap, swipe, saisie) pour réaliser une tâche complète dans l’appli visible.
**Comment activer la fonction sur mon téléphone ?**
Depuis la bêta 17.4 de l’appli Google : Paramètres > Gemini > Fonctions expérimentales > Screen Automation.
**Mes données personnelles sont-elles en sécurité ?**
Google signale que des captures d’écran peuvent être examinées par des réviseurs. Évitez d’entrer des infos sensibles pendant l’automatisation.
**Puis-je arrêter l’automatisation en cours ?**
Oui. Touchez simplement l’overlay « Arrêter », ou secouez le téléphone pour reprendre la main.
**Fonctionne-t-elle hors connexion ?**
Non. L’IA a besoin d’une connexion pour traiter la demande et coordonner les actions.
**Y a-t-il des limitations métiers (banques, santé) ?**
Les apps susceptibles d’impliquer des urgences ou des données médicales sont exclues par défaut.
**Comment éviter les erreurs de commande ?**
Vérifiez le récapitulatif que Gemini affiche avant la validation finale.
## 8. Données techniques (debug interne) Aucun bloc brut transmis.
---
Écrire l’avenir, c’est déjà l’automatiser. Avec la *screen automation*, **Google Gemini** transforme le geste numérique en simple intention, rapprochant un peu plus Silicon Valley de la science-fiction. Reste à conjuguer commodité et vigilance pour que l’innovation demeure au service de l’humain.