O que é o ClaudeBot? O rastreador web da Anthropic explicado
Pela equipe da ChatGBot · Publicado em 24 de agosto de 2026
O ClaudeBot é o rastreador web operado pela Anthropic, a empresa por trás do assistente de IA Claude. Ele visita automaticamente páginas públicas da web para coletar dados de texto, e os donos de sites podem permiti-lo ou bloqueá-lo pelo arquivo robots.txt.
Every top AI in one app
GPT, Claude, DeepSeek, Qwen and GLM — one subscription.
Try ChatGBot →Se você administra um site, provavelmente já viu o ClaudeBot nos logs do seu servidor e se perguntou o que ele está fazendo e se deveria deixá-lo passar. Este guia explica o rastreador ClaudeBot em termos simples, incluindo sua string de user agent, como ele se comporta e os passos exatos para permiti-lo ou bloqueá-lo.
Ele também esclarece uma confusão comum: o bot Claude que rastreia a web não é a mesma coisa que o chatbot Claude com quem você conversa. Os dois vêm da Anthropic, mas fazem trabalhos bem diferentes.
O que é o ClaudeBot e o que ele faz?
O ClaudeBot é um programa automatizado, muitas vezes chamado de rastreador ou spider, que segue links pela internet pública e lê o conteúdo das páginas que encontra. A Anthropic usa os dados que ele coleta como parte do material que pode ajudar a treinar e melhorar seus modelos de IA.
Na prática, o ClaudeBot funciona de forma muito parecida com outros rastreadores conhecidos, como o Googlebot ou o Bingbot. Ele solicita uma página, lê o texto visível e segue em frente. Ele foca em páginas disponíveis publicamente e deve respeitar as regras que você define no seu arquivo robots.txt.
Veja o que o rastreador ClaudeBot normalmente faz:
- Visita páginas públicas da web seguindo links e sitemaps.
- Lê o texto das páginas para que ele possa ser usado como dados da web pela Anthropic.
- Verifica seu arquivo robots.txt para ver quais caminhos ele tem permissão de acessar.
- Identifica-se com uma string de user agent clara para que você possa reconhecê-lo nos logs.
A string de user agent do ClaudeBot
Todo rastreador se identifica com um user agent, uma pequena linha de texto enviada a cada requisição. O user agent do ClaudeBot facilita identificá-lo nos seus logs de acesso e direcioná-lo nas regras do seu robots.txt.
O token que você usa para a correspondência é simplesmente ClaudeBot. Uma linha completa de user agent do rastreador geralmente é assim:
| Rastreador | Token do user agent | Exemplo de string completa |
|---|---|---|
| ClaudeBot | ClaudeBot | Mozilla/5.0 (compatible; ClaudeBot/1.0; +http://www.anthropic.com/claudebot) |
O número exato da versão e os detalhes podem mudar com o tempo, então a abordagem confiável é fazer a correspondência pela palavra ClaudeBot, e não por uma string fixa completa. A Anthropic também usou outros nomes de agente para finalidades diferentes, como buscar uma única página sobre a qual um usuário perguntou, então vale a pena revisar a própria documentação de rastreadores da Anthropic se você quiser tratar cada um separadamente.
Um cuidado: um user agent pode ser copiado por qualquer um, então uma requisição que diz ser o ClaudeBot não é prova por si só. Se você precisa de certeza, verifique a requisição comparando-a com as faixas de rede que a Anthropic publica, em vez de confiar apenas no nome. Este guia não lista endereços IP específicos, porque eles podem mudar e devem sempre ser obtidos da fonte oficial.
Como permitir o ClaudeBot no robots.txt
Por padrão, se o seu arquivo robots.txt não o bloquear, o ClaudeBot tem permissão de rastrear suas páginas públicas. Se você quiser tornar essa permissão explícita, ou manter certas áreas abertas enquanto fecha outras, pode nomear o rastreador diretamente.
Para permitir o ClaudeBot de forma clara em todo o seu site, adicione isto ao arquivo robots.txt na raiz do seu domínio:
- User-agent: ClaudeBot
- Allow: /
Permitir o rastreador significa que seu conteúdo pode ser lido pela Anthropic como parte de seus dados da web. Alguns publicadores aceitam isso pela visibilidade, enquanto outros preferem manter o material de fora. Não há uma única resposta certa; depende dos seus objetivos para o site.
Como bloquear o ClaudeBot no robots.txt
Se você prefere manter suas páginas de fora, o método mais simples é uma regra no robots.txt. Essa é a resposta padrão para a pergunta de como bloquear o ClaudeBot, e leva apenas duas linhas.
Coloque o seguinte na raiz do seu domínio, por exemplo em seusite.com/robots.txt:
- User-agent: ClaudeBot
- Disallow: /
A linha Disallow: / diz ao rastreador para não acessar nenhum caminho do seu site. Você também pode bloquear apenas parte do site listando pastas específicas, por exemplo Disallow: /members/, deixando o restante aberto.
Alguns pontos importantes a ter em mente:
- robots.txt é um pedido, não uma tranca. Rastreadores bem comportados o seguem, mas ele não impede fisicamente o acesso. Para material realmente privado, use senhas ou restrições no nível do servidor.
- As mudanças não são instantâneas. Um rastreador só vê sua nova regra na próxima vez que ler seu robots.txt, então pode levar tempo para fazer efeito.
- Bloquear o ClaudeBot não afeta os buscadores. O Googlebot e o Bingbot usam suas próprias regras separadas, então bloquear o rastreador da Anthropic não vai remover você do Google ou do Bing.
ClaudeBot vs o chatbot Claude
É aqui que começa boa parte da confusão. O ClaudeBot é um rastreador em segundo plano que coleta dados da web. O chatbot Claude é o assistente com quem as pessoas conversam para escrever, resumir e responder perguntas. Eles compartilham uma empresa-mãe, mas não são o mesmo produto.
Se você quer entender o lado do assistente, nosso guia sobre o que é o Claude AI mostra o que o chatbot pode fazer, e os modelos do Claude explicados cobre as diferentes versões de modelo. Para saber sobre a empresa em si, veja o que é a Anthropic.
Em resumo: ver o ClaudeBot nos seus logs significa que o rastreador visitou seu site, não que uma pessoa usou o chatbot nas suas páginas. Bloquear o rastreador não impede ninguém de usar o app Claude, e usar o app Claude não envia esse rastreador ao seu site.
Você deve permitir ou bloquear o rastreador da Anthropic?
Não há uma resposta universal, mas algumas perguntas simples podem orientar sua decisão sobre o rastreador da Anthropic.
- Você quer amplo alcance? Permitir o rastreador mantém seu conteúdo no conjunto de dados públicos da web.
- Seu conteúdo é sensível ou pago? Se for, bloquear o rastreador, e proteger as páginas de forma adequada, faz sentido.
- Você está preocupado com a carga no servidor? Rastreadores respeitáveis costumam ser leves, mas você pode bloquear ou limitar qualquer bot que faça requisições de forma agressiva demais.
Se você também publica conteúdo e quer verificar como um texto gerado por máquina se lê, nosso guia do detector de conteúdo de IA é um companheiro útil. E se você está escolhendo qual assistente de fato usar no dia a dia, a visão geral do chat do Claude AI compara a experiência.
Experimente o Claude e outros modelos no ChatGBot
Entender o ClaudeBot é uma coisa; usar o Claude de fato é outra. Se você quer usar o assistente Claude sem se comprometer com um único provedor, o ChatGBot permite usar o Claude ao lado de outros modelos de ponta, incluindo GPT, DeepSeek, Qwen e GLM, em um só lugar por uma única assinatura. Você pode trocar de modelo no meio da conversa, então nunca fica preso a uma única escolha.
Perguntas frequentes
O ClaudeBot é o mesmo que o chatbot Claude?
Não. O ClaudeBot é o rastreador web da Anthropic que lê páginas públicas para coletar dados da web. O chatbot Claude é o assistente com quem as pessoas conversam. Eles vêm da mesma empresa, mas fazem trabalhos diferentes.
Como impeço o ClaudeBot de rastrear meu site?
Adicione uma regra ao seu arquivo robots.txt com User-agent: ClaudeBot em uma linha e Disallow: / na seguinte. Isso pede ao rastreador para ficar fora das suas páginas. Para dados privados, proteja também as páginas com senhas ou restrições no servidor.
Bloquear o ClaudeBot vai prejudicar meu ranking de busca?
Não. O ClaudeBot é separado dos rastreadores de buscadores, como o Googlebot e o Bingbot, que seguem as próprias regras de robots.txt. Bloquear o rastreador da Anthropic não remove seu site do Google ou do Bing.
Como posso confirmar que uma requisição é realmente do ClaudeBot?
Verifique primeiro a string de user agent do ClaudeBot nos seus logs e depois confira a requisição comparando-a com as faixas de rede que a Anthropic publica. Um user agent sozinho pode ser falsificado, então compará-lo a uma fonte oficial é a forma confiável de confirmar.
A conclusão
O ClaudeBot é um rastreador web direto da Anthropic, fácil de identificar pelo seu user agent e fácil de permitir ou bloquear pelo robots.txt. Decida com base nos seus próprios objetivos para o seu conteúdo. E se você quer colocar o Claude para trabalhar ao lado de outros modelos de ponta, o ChatGBot é um lugar simples para começar.