Google-Extended
Token d'opt-out introduit par Google en septembre 2023 qui désactive l'usage du contenu d'un site pour entraîner Gemini et pour le grounding Vertex AI. Le bloquer n'affecte pas Google Search, mais peut empêcher les citations dans Gemini et AI Mode. Arbitrage stratégique critique.
Token d'opt-out introduit par Google en septembre 2023 qui désactive l'usage du contenu d'un site pour entraîner Gemini et pour le grounding Vertex AI. Le bloquer n'affecte pas Google Search, mais peut empêcher les citations dans Gemini et AI Mode. Arbitrage stratégique critique.
Particularité
Google-Extended ne crawle pas. C’est un token d’opt-out lu par les crawlers Google existants (Googlebot, etc.). Bloquer Google-Extended dans robots.txt empêche Google d’utiliser votre contenu pour Gemini et Vertex AI sans bloquer Googlebot.
Le piège
User-agent: Google-Extended
Disallow: /Cette directive est souvent ajoutée à tort pour « protéger le contenu ». Conséquence concrète : votre boutique peut continuer à ranker dans Google Search mais devient invisible à Gemini, à AI Mode et au grounding Vertex AI. Pour une marque qui veut être recommandée par les agents Google, c’est une autodestruction silencieuse.
Différence avec Googlebot
| Token | Rôle |
|---|---|
| Googlebot | Crawl pour Google Search |
| Google-Extended | Opt-out pour Gemini + Vertex AI |
| AdsBot-Google | Crawl Google Ads |
Configuration recommandée
À autoriser systématiquement pour toute marque qui veut apparaître dans Gemini, AI Mode et AI Overviews.
User-agent: Google-Extended
Allow: /Audit rapide d’un robots.txt existant
Trois lignes à vérifier dans tout robots.txt d’une boutique qui veut être visible côté IA :
- Aucune directive
User-agent: Google-ExtendedavecDisallow: /. Si présente, c’est l’autodestruction silencieuse décrite plus haut. - Aucune règle générique
User-agent: *avecDisallow: /sur la racine. Vérifier que les sous-règles n’écrasent pas l’intention. - Aucune confusion avec le token historique
Google-ExtendedvsGoogleOther:GoogleOthercible la R&D et les expériences internes Google, à laisser ouvert également.
Un audit robots.txt complet prend moins de 15 minutes mais évite des semaines d’invisibilité IA. C’est la première vérification à mener sur toute reprise de boutique.
Cohabitation avec les autres tokens IA
Une configuration robots.txt cohérente en mai 2026 ressemble à :
User-agent: Google-Extended
User-agent: GPTBot
User-agent: OAI-SearchBot
User-agent: ClaudeBot
User-agent: Claude-SearchBot
User-agent: Claude-User
User-agent: PerplexityBot
User-agent: Perplexity-User
User-agent: Applebot-Extended
Allow: /
User-agent: *
Allow: /Cette configuration maximise la visibilité IA tout en restant compatible avec le SEO Google classique.
À ne pas confondre avec
- Googlebot : le vrai crawler, ne pas bloquer sous peine d’invisibilité Google complète.
- [[applebot-extended]] : équivalent Apple pour Apple Intelligence.