Google-Extended
Google-Extended é o token de robots.txt com que um site decide se o conteúdo rastreado pelo Google pode treinar modelos Gemini e servir de base para respostas nos apps Gemini.
Foi anunciado em 28 de setembro de 2023 (Google). Não tem user agent próprio: o rastreamento usa os robôs do Google que já existem, e o token só funciona como controle (Google).
Exemplo
O exemplo da documentação do Google libera uma página e bloqueia o resto da mesma pasta para o Google-Extended:
user-agent: Google-Extended
allow: /archive/1Q84
disallow: /archive/Para bloquear o site inteiro, o grupo leva disallow: /. A regra não mexe na Pesquisa: o Google-Extended não afeta a inclusão no índice nem é usado como sinal de ranking (Google).
Por que importa
O Google-Extended não controla o AI Overviews. Na IA da Pesquisa, o controle é o robots.txt do Googlebot e as regras nosnippet, data-nosnippet, max-snippet e noindex (Google Search Central). Em março de 2025, o AI Overviews já era usado por mais de 1 bilhão de pessoas (Google).
Bloquear o Gemini e continuar no AI Overviews são decisões separadas, e eu reviso as duas no SEO técnico.