Auditor de acesso para rastreadores de IA
GPTBot, ClaudeBot, PerplexityBot, Google-Extended e muitos mais: descubra exatamente que rastreadores de IA o seu robots.txt permite ou bloqueia.
Como utilizar
Introduza o seu website
Vamos buscar o seu robots.txt em direto.
Veja cada crawler de AI
GPTBot, ClaudeBot, PerplexityBot, Google-Extended e muitos mais — permitido, bloqueado ou sem regra específica.
Decida com intenção
Bloquear é uma escolha legítima; o importante é saber qual é de facto a sua posição, não adivinhar.
O que verificamos
- Obtém o robots.txt em direto do seu site e compara-o com 11 rastreadores de IA com nome próprio: GPTBot e ChatGPT-User (OpenAI), ClaudeBot e anthropic-ai (Anthropic), PerplexityBot, Google-Extended (treino do Gemini e funcionalidades de IA, independente da indexação de pesquisa do Googlebot), CCBot (Common Crawl, que alimenta muitos modelos abertos), Bytespider (ByteDance), Amazonbot, Applebot-Extended (Apple Intelligence) e meta-externalagent (Meta).
- Indica cada bot como Permitido, Bloqueado, ou Sem regra específica (aplica-se o que o grupo universal
User-agent: *). - Deliberadamente não lhe diz que posição adotar: bloquear os rastreadores de IA é uma opção legítima para alguns sites. A chave é saber que posição tem realmente, em vez de a supor.
Ferramentas relacionadas
- Verificador de Robots.txt e Meta Robots — Teste o mesmo robots.txt com os rastreadores de pesquisa habituais, não apenas com os de IA
- Gerador e validador de llms.txt — o robots.txt controla o acesso; o llms.txt é a camada complementar de descoberta para a IA
- Website Check — Uma revisão mais ampla do resto do site com pontuação de IA enquanto audita o acesso dos rastreadores
Última atualização: 19 de agosto de 2026 · Criado pela equipa de PPC da CWA Europe.