ASM Digital
Glossário

O que é Googlebot? Como funciona o robô de rastreamento do Google

2 de outubro de 2026Última atualização em 5 de novembro de 20265 min de leitura

Googlebot é o nome do robô que o Google usa para rastrear a web. Ele visita páginas, baixa o conteúdo, executa o JavaScript e segue os links para descobrir novas URLs. Tudo o que aparece nos resultados de busca passou antes pelo Googlebot, que entrega as páginas para o Google analisar e indexar.

Saber como o Googlebot se comporta ajuda a resolver problemas que parecem misteriosos: uma página que não aparece no Google, um conteúdo que o robô não enxerga ou um bloqueio no servidor que derruba o tráfego orgânico sem aviso.

Como funciona o Googlebot

O Googlebot executa o rastreamento em escala. Ele parte de uma lista de URLs conhecidas, consulta o robots.txt de cada domínio, faz a requisição da página e registra os links encontrados para visitar depois. O ritmo de visitas se ajusta ao servidor: quando o site responde rápido, o robô acelera; quando aparecem erros 5xx ou respostas 429, ele reduz a frequência.

Depois do download, a página passa pela renderização. O Google usa uma versão atualizada do Chromium para executar o JavaScript e enxergar o conteúdo como um navegador. Conteúdo que só aparece depois de um clique, de uma rolagem ou de um login não é visto pelo robô.

Tipos de Googlebot

O Google trabalha com dois rastreadores principais para a busca:

  • Googlebot Smartphone: simula um usuário em celular. Desde a conclusão da indexação mobile-first, é ele quem rastreia a maior parte dos sites.
  • Googlebot Desktop: simula um usuário em computador e aparece em volume menor.

Os dois obedecem à mesma regra no robots.txt, identificada pelo token Googlebot. Além deles, o Google tem rastreadores específicos, como o Googlebot-Image para imagens, o Googlebot-Video para vídeos e o Google-InspectionTool, usado pelos testes do Search Console. O token Google-Extended não é um robô separado: ele serve para o site autorizar ou não o uso do conteúdo no treinamento dos modelos de IA do Google, sem afetar o ranqueamento na busca.

Nos dados do SE Ranking para o Brasil, "googlebot" tem 480 buscas por mês e dificuldade 18, com volume estável ao longo de 2026.

Por que o Googlebot importa para SEO

Se o Googlebot não consegue acessar ou entender uma página, ela não disputa nenhuma posição na SERP, por melhor que seja o conteúdo. Três situações mostram o impacto:

  1. Bloqueios acidentais. Uma regra errada no robots.txt ou um firewall que barra o robô tira páginas do Google em poucos dias.
  2. Conteúdo invisível. Textos carregados por JavaScript que falha na renderização não são lidos, e a página ranqueia como se estivesse vazia.
  3. Visitas desperdiçadas. Em sites grandes, parâmetros e conteúdo duplicado fazem o robô gastar requisições em cópias em vez de páginas novas.

Como verificar a visita do Googlebot

  1. Abra a Inspeção de URL no Search Console e consulte a página. O relatório mostra a data do último rastreamento e se a visita foi feita pelo Googlebot Smartphone ou Desktop.
  2. Clique em "Testar URL publicada" e depois em "Ver página testada". A captura de tela e o HTML renderizado mostram exatamente o que o robô enxerga.
  3. Confira o relatório Estatísticas de rastreamento, em Configurações. Ele traz as requisições por dia, o tempo de resposta e a divisão por tipo de Googlebot.
  4. Valide o robots.txt. Para bloquear só o carrinho de uma loja para o Googlebot, a regra é User-agent: Googlebot seguida de Disallow: /carrinho/. O guia de robots.txt mostra as outras diretivas.
  5. Confirme que a visita é real. Qualquer robô consegue se identificar como Googlebot no user agent, que contém o trecho Googlebot/2.1. Para confirmar, faça uma consulta de DNS reverso no IP do log com o comando host 66.249.66.1. O resultado precisa terminar em googlebot.com, google.com ou googleusercontent.com. Depois, faça a consulta direta do nome encontrado e confira se ela volta para o mesmo IP. O Google também publica a lista oficial de IPs do Googlebot em um arquivo JSON na documentação da Central da Pesquisa.

Um exemplo prático: uma loja percebe a queda de páginas indexadas e encontra no log do servidor milhares de acessos de um user agent "Googlebot". A consulta de DNS reverso mostra que os IPs pertencem a um provedor de nuvem qualquer, não ao Google. O tráfego era de um robô copiador se passando pelo Googlebot. A loja bloqueia esses IPs no firewall e mantém liberados apenas os IPs validados do Google.

Se você quer saber como o Googlebot está enxergando as páginas do seu site, o diagnóstico de SEO gratuito da ASM Digital compara o HTML renderizado com o conteúdo publicado e aponta os bloqueios.

Erros comuns

  • Bloquear o Googlebot por user agent no firewall depois de um pico de acessos, sem checar se o tráfego era legítimo.
  • Usar a diretiva Crawl-delay no robots.txt para reduzir as visitas. O Googlebot ignora essa diretiva e ajusta o ritmo sozinho.
  • Esconder conteúdo atrás de abas carregadas por clique via JavaScript. O robô não clica em botões.
  • Servir um conteúdo ao Googlebot e outro ao usuário. Essa prática é chamada de cloaking e viola as políticas do Google.

Googlebot vs algoritmo do Google

O Googlebot só coleta as páginas. Quem decide a posição de cada uma é o algoritmo do Google, que analisa o conteúdo depois da indexação. Uma página rastreada com frequência não ranqueia melhor por isso: a frequência de rastreamento indica que o Google conhece a página, não que ela é relevante.

Perguntas frequentes

Com que frequência o Googlebot visita um site?

Depende do site. Páginas que mudam muito e recebem muitos links são visitadas com mais frequência, e um servidor rápido permite mais visitas por dia. O relatório Estatísticas de rastreamento mostra a média do seu site.

Posso bloquear o Googlebot em uma parte do site?

Sim. Uma regra Disallow no robots.txt impede o rastreamento da pasta indicada. Para tirar uma página dos resultados, use a tag noindex e deixe o robô acessar a página para ler essa tag.

O Googlebot executa JavaScript?

Sim. O Googlebot renderiza as páginas com uma versão atualizada do Chromium. A renderização acontece depois do download, e conteúdo que depende de clique, rolagem ou login não aparece para o robô.

Termos relacionados

Quer garantir que o Googlebot enxerga todo o conteúdo do seu site? Conheça o SEO técnico da ASM Digital.

← Voltar ao blog