Saltar para o conteúdo
BEACON Ferramenta Gratuita

Verificador de Crawlers de IA e robots.txt Gratuito

Se o seu robots.txt não permitir o GPTBot, o PerplexityBot, o ClaudeBot ou o Google-Extended, esses motores não conseguem ler o seu site — e não o vão recomendar. Cole o seu URL para uma leitura real do seu robots.txt ao vivo e veja exatamente quais os crawlers de IA permitidos ou bloqueados. Sem registo.

https://
GPTBot (ChatGPT)Verifica se o crawler da OpenAI tem permissão para ler e aprender com as suas páginas.
PerplexityBotConfirma se o Perplexity consegue aceder ao seu conteúdo para o citar nas respostas.
ClaudeBotVerifica o acesso do crawler da Anthropic para o Claude.
Google-ExtendedO controlo que define se o seu conteúdo alimenta o Gemini e as funcionalidades de IA do Google.
Lê o seu robots.txt ao vivoUma obtenção real do seu /robots.txt efetivo — não uma estimativa em cache ou um resultado inventado.
llms.txt tambémTambém reporta se publica um /llms.txt para orientar os motores de IA para o seu melhor conteúdo.

Porque é que o acesso dos crawlers de IA importa

Os motores de IA só conseguem recomendar aquilo que conseguem ler. Uma única linha Disallow demasiado abrangente no robots.txt pode remover o seu site discretamente do ChatGPT, do Perplexity, do Claude e do Gemini — um dos erros de visibilidade mais comuns e mais invisíveis.

  • GPTBot — OpenAI / ChatGPT
  • OAI-SearchBot — pesquisa do ChatGPT
  • PerplexityBot — Perplexity
  • ClaudeBot — Anthropic / Claude
  • Google-Extended — Gemini e funcionalidades de IA do Google

Permitir vs bloquear — a sua escolha

Alguns sites bloqueiam deliberadamente os crawlers de IA para proteger o conteúdo; a maioria quer a visibilidade. Seja como for, deve conhecer o seu estado atual. Esta ferramenta limita-se a reportar o que o seu robots.txt diz hoje, para que a decisão seja informada e não acidental.

Como desbloquear os crawlers de IA

Se um crawler estiver bloqueado, remova ou restrinja a regra Disallow relevante para esse user-agent no robots.txt e volte a verificar. Depois de corrigir o acesso, garanta que o seu conteúdo está em HTML estático (e não apenas em JavaScript) para que os crawlers o vejam de facto — uma conta Beacon gratuita mede esse render gap em todo o seu site.

FAQ

Como sei se o GPTBot está bloqueado?

Cole o seu URL acima. O Beacon lê o seu robots.txt ao vivo e reporta se o GPTBot, o PerplexityBot, o ClaudeBot e o Google-Extended estão permitidos ou não permitidos.

Devo bloquear os crawlers de IA?

Depende dos seus objetivos. Bloquear protege o conteúdo de ser usado para treino e respostas, mas também o remove das recomendações de IA. A maioria das marcas que procuram visibilidade deve permiti-los.

Este resultado é exato?

Sim — é uma obtenção real do seu /robots.txt no momento da verificação, analisada para cada user-agent de IA. Nada é inventado.

E o conteúdo gerado por JavaScript?

Permitir os crawlers é o primeiro passo; eles também precisam de HTML legível. Se o seu conteúdo só aparecer depois de o JavaScript correr, os crawlers veem uma casca vazia. Uma conta Beacon gratuita mede este render gap.

Continue a ler

Free Google AI Overviews Checker Verificador de SEO Gratuito — uma auditoria on-page real em segundos. How to optimize for Google Gemini & AI Mode. The GEO glossary: AI search terms, defined.

Verifique já o acesso dos crawlers de IA

Gratuito, real, sem registo — veja quem consegue ler o seu site.