ClaudeBot: o que o rastreador da Anthropic faz e como bloquear
A Anthropic diz que o ClaudeBot coleta conteúdo da web que pode contribuir para treinar os modelos de IA generativa dela. Quando um site bloqueia o ClaudeBot, o conteúdo futuro desse site deve ficar fora dos dados de treinamento.
O que ele faz
A Anthropic tem outros dois agentes: o Claude-SearchBot, para busca, e o Claude-User, para páginas que uma pessoa pede ao Claude para ler. Cada um tem a própria configuração no robots.txt.
User agent
A ajuda da Anthropic dá o token ClaudeBot no robots.txt, mas não publica o user agent completo. Procure ClaudeBot no user agent e confira o IP na lista da Anthropic.
robots.txt
A Anthropic diz que os bots dela respeitam o robots.txt e não tentam passar por CAPTCHAs. Ela também aceita a linha Crawl-delay, que a maioria dos rastreadores ignora. Use para deixar o ClaudeBot mais lento em vez de bloquear. Coloque a regra no robots.txt de cada subdomínio que você quer cobrir.
Para bloquear:
User-agent: ClaudeBot
Disallow: /Para liberar:
User-agent: ClaudeBot
Allow: /O que você perde ao bloquear
Suas páginas futuras ficam fora dos dados de treinamento da Anthropic. Os resultados de busca do Claude são outra configuração, o Claude-SearchBot, então bloquear o ClaudeBot não esconde você ali.
Como saber se é ele de verdade
A Anthropic publica uma lista de IPs para os bots dela (link nas fontes). Ela diz que um rastreador com IP de origem nessa lista vem da Anthropic. Ela avisa que bloquear os IPs dela, em vez de usar o robots.txt, pode não funcionar como saída, porque aí ela não consegue ler o seu robots.txt.
Firewall
Uma regra de firewall que bloqueia “Anthropic” ou “Claude” pelo nome pode pegar também o Claude-SearchBot e o Claude-User. Bloqueie só o ClaudeBot se tudo o que você quer é parar o treinamento. Se você usa a Cloudflare, abra Security Settings > Configure AI bot policies e deixe Search em Allow (não bloqueie). A documentação da Cloudflare diz que, desde 15 de setembro de 2026, bloquear Training também bloqueia os rastreadores que fazem busca e treinamento.
Com o CrawlCoach
Bloquear o ClaudeBot é escolha sua, então o CrawlCoach não aponta isso. Ele aponta regras do robots.txt e recusas do firewall que pegam o Claude-SearchBot, o rastreador que a busca do Claude usa.
Perguntas frequentes
Qual é o user agent do ClaudeBot?
A ajuda da Anthropic dá o token ClaudeBot, mas não o user agent completo. Procure ClaudeBot no user agent e confirme que o IP está na lista publicada pela Anthropic.
Como bloquear o ClaudeBot?
Coloque User-agent: ClaudeBot e Disallow: / no robots.txt de cada subdomínio. A Anthropic diz que o robots.txt é o jeito de sair. Bloqueios por IP podem não funcionar direito.
Posso deixar o ClaudeBot mais lento em vez de bloquear?
Pode. A Anthropic aceita Crawl-delay. Por exemplo: User-agent: ClaudeBot e depois Crawl-delay: 1.
Fontes
Conferido em 8 de outubro de 2026. O Google muda o Search Console e a ajuda de tempos em tempos. Se algo estiver diferente na sua tela, confira a fonte.
Veja quais páginas do seu site estão fora do Google
Entre com sua conta Google. O CrawlCoach confere até 500 páginas de graça e mostra a correção de cada problema.
Gerar meu relatório grátisGrátis para até 500 páginas. Sem cartão. Entre com a conta Google que você usa no Search Console.
O app e os relatórios do CrawlCoach estão em inglês.
Outros rastreadores de IA
- Claude-SearchBotO Claude-SearchBot rastreia páginas para melhorar os resultados de busca do Claude. A Anthropic diz que bloquear pode reduzir a sua visibilidade.
- Claude-UserO Claude-User visita páginas quando uma pessoa pergunta algo ao Claude. Bloquear pode reduzir a sua visibilidade nas buscas feitas no Claude.
- GPTBotO GPTBot coleta páginas que podem treinar os modelos da OpenAI. Bloquear não tira você da busca do ChatGPT. Aqui estão as linhas exatas.
- Google-ExtendedO Google-Extended é um token do robots.txt, não um rastreador. Ele controla o treinamento e o embasamento do Gemini, sem afetar a Pesquisa Google.