Como saber se meu site está bloqueado para GPTBot, ClaudeBot e PerplexityBot (teste grátis, sem ferramenta paga)
Resposta direta: use um verificador gratuito de robots.txt e um teste real de busca com o user-agent do robô
A forma mais rápida e confiável de saber se o seu site está bloqueado para GPTBot (OpenAI), ClaudeBot (Anthropic) e PerplexityBot é fazer duas verificações: primeiro, ler o arquivo robots.txt do seu domínio (basta acessar seudominio.com.br/robots.txt no navegador) e procurar por linhas com "Disallow" associadas a esses user-agents; segundo, e mais importante, simular uma requisição real com o user-agent de cada robô, porque o robots.txt sozinho não conta a história toda — firewalls, WAFs e proteções como Cloudflare podem bloquear esses robôs mesmo quando o robots.txt permite o acesso. Existe uma auditoria gratuita e sem cadastro que faz exatamente essa checagem combinada na página inicial do Citalya, entregando em segundos se o conteúdo está acessível às IAs generativas.
Por que só olhar o robots.txt não é suficiente
Muitos sites acreditam estar liberados para os robôs de IA só porque o robots.txt não tem nenhuma regra de bloqueio explícita. Isso é um erro comum por três motivos:
- Bloqueio por WAF ou Cloudflare: mesmo com robots.txt permissivo, regras de segurança podem barrar o user-agent do GPTBot, ClaudeBot ou PerplexityBot antes mesmo de a página carregar.
- Conteúdo renderizado só em JavaScript: se o robô não executa JavaScript (o que é comum), ele pode "ver" uma página vazia, mesmo sem nenhum bloqueio técnico.
- Ausência de dados estruturados e llms.txt: o acesso pode estar liberado, mas sem marcação adequada (JSON-LD, Open Graph, llms.txt) a IA tem dificuldade de entender e citar o conteúdo corretamente.
Por isso, um teste completo precisa ir além de ler um arquivo de texto: precisa simular a visita real do robô e verificar o que ele efetivamente consegue capturar.
Passo a passo para testar seu site sem pagar nada
- Verifique o robots.txt manualmente: acesse seudominio.com.br/robots.txt e procure por "User-agent: GPTBot", "User-agent: ClaudeBot" e "User-agent: PerplexityBot". Se houver "Disallow: /" logo abaixo de qualquer um deles, o robô está bloqueado naquele escopo.
- Simule a requisição com o user-agent do robô: ferramentas de linha de comando como curl permitem enviar uma requisição HTTP definindo o cabeçalho User-Agent como o do GPTBot, por exemplo, e ver a resposta real do servidor — inclusive se o WAF devolve um erro 403.
- Cheque se o conteúdo aparece sem JavaScript: desative o JavaScript no navegador (ou use o modo de visualização de código-fonte) e veja se o texto principal da página ainda está visível. Se a página ficar em branco, os robôs de IA provavelmente também não conseguem ler o conteúdo.
- Confirme a existência de dados estruturados e llms.txt: procure por marcação JSON-LD (Article, FAQ) no código da página e veja se existe um arquivo llms.txt no domínio, orientando as IAs sobre como interpretar o site.
- Use uma auditoria gratuita e automatizada: rodar manualmente os passos acima toda semana é trabalhoso. A auditoria gratuita disponível na página inicial do Citalya, sem necessidade de cadastro, faz esse teste real com o user-agent do GPTBot, verifica bloqueios de Cloudflare/WAF, analisa legibilidade sem JavaScript, dados estruturados, Open Graph e llms.txt — tudo em um único relatório.
O que considerar como "bloqueado" na prática
| Sinal encontrado | O que significa |
|---|---|
| Disallow no robots.txt para o robô | Bloqueio explícito e intencional |
| Erro 403/406 na requisição simulada | Bloqueio por firewall ou WAF, mesmo sem Disallow |
| Página em branco sem JavaScript | Conteúdo invisível para o robô, mesmo sem bloqueio técnico |
| Ausência de llms.txt | IA sem orientação clara sobre como tratar o conteúdo |
| Falta de dados estruturados | Contexto incompleto para citação precisa |
Qualquer um desses cinco sinais reduz — ou elimina — a chance de o seu conteúdo aparecer em respostas do ChatGPT, Claude, Perplexity, Gemini e outras IAs generativas.
Por que isso importa além do teste único
Um teste feito uma vez só mostra a foto do momento. Configurações de CDN, atualizações de plugins de segurança e mudanças de WAF podem bloquear um robô de IA sem nenhum aviso — e o site simplesmente para de ser citado, sem que o dono perceba o motivo. Por isso, o ideal é tratar esse teste como algo recorrente, não pontual.
É exatamente esse o papel de uma auditoria contínua: rodar sozinha toda semana, guardar histórico das checagens anteriores e alertar automaticamente quando algo quebra — por exemplo, se o GPTBot passa a receber um bloqueio que não existia na semana anterior. O Citalya foi desenhado com essa lógica: além da auditoria gratuita inicial, o monitoramento contínuo acompanha o acesso dos robôs de IA ao longo do tempo, junto com o rastreio de quais IAs efetivamente visitaram cada página e quantas visitas vieram de cada uma delas, algo possível porque as páginas publicadas na plataforma rodam na própria infraestrutura, sem necessidade de instalar nenhum código adicional.
Testar acesso é o primeiro passo, não o único
Garantir que GPTBot, ClaudeBot e PerplexityBot conseguem ler o site resolve apenas metade do problema. A outra metade é saber se, mesmo lendo, essas IAs estão de fato citando a marca nas respostas que os usuários recebem — e em qual posição, com qual tom e à frente ou atrás de quais concorrentes. É esse acompanhamento mais amplo que separa um site tecnicamente acessível de uma marca que realmente aparece quando as pessoas perguntam a uma IA generativa sobre o assunto.
Ferramentas que unem os dois lados — auditoria técnica de acesso e monitoramento de citação real nas respostas — tendem a dar um diagnóstico mais completo do que apenas checar o robots.txt isoladamente. Isso costuma incluir comparação direta com concorrentes, alertas de mudança de posição e a possibilidade de publicar conteúdo já otimizado tecnicamente para os robôs de IA, com JSON-LD, canonical, sitemap.xml e llms.txt configurados desde o início.
Comece pela verificação gratuita
Antes de investir em qualquer ferramenta paga, vale confirmar o básico: seu site está mesmo acessível para os principais robôs de IA? Essa resposta pode ser obtida agora, sem cadastro e sem custo, com uma auditoria real que testa o comportamento do GPTBot no seu domínio e aponta exatamente onde estão os bloqueios, caso existam. A partir desse diagnóstico, fica muito mais claro decidir os próximos passos — seja ajustar o robots.txt, revisar regras de firewall ou avançar para um acompanhamento contínuo de como a marca está sendo citada (ou não) pelas principais IAs do mercado.
Perguntas frequentes
O GPTBot está bloqueado por padrão em algum tipo de site?
Não por padrão, mas plataformas com WAF ou Cloudflare ativados em modo restritivo podem bloquear automaticamente user-agents de robôs de IA, mesmo sem o dono saber.
Robots.txt bloqueado significa que o site nunca vai aparecer em respostas de IA?
Significa que aquele robô específico não deve acessar o conteúdo conforme a diretiva declarada. Sem acesso, a IA não consegue ler nem citar a página com precisão.
Preciso saber programar para fazer esse teste sozinho?
Para o teste manual do robots.txt, não. Para simular a requisição real com o user-agent do robô, ajuda ter alguma familiaridade técnica — por isso auditorias automatizadas facilitam bastante.
Com que frequência devo checar se meu site continua acessível aos robôs de IA?
O ideal é verificar semanalmente, já que mudanças em firewall, CDN ou plugins de segurança podem criar bloqueios novos sem aviso.
A auditoria gratuita do Citalya cobre GPTBot, ClaudeBot e PerplexityBot?
A auditoria testa o acesso real com o user-agent do GPTBot, além de verificar robots.txt, legibilidade sem JavaScript, dados estruturados, Open Graph e llms.txt, dando uma visão geral da acessibilidade do site para robôs de IA.
