Meu robots.txt bloqueia o ChatGPT?

Atualizado em

O seu robots.txt bloqueia a busca do ChatGPT se tiver uma regra Disallow para o OAI-SearchBot (ou para todos os robôs, com User-agent: *); bloquear só o GPTBot impede o uso para treino, mas não tira o site das respostas de busca.

Conferir meu robots.txt

Grátis, sem cadastro: cole o endereço do site.

Como conferir

Abra seudominio.com/robots.txt e procure os grupos User-agent. Um "Disallow: /" no grupo do OAI-SearchBot ou no grupo * (sem um grupo próprio liberando o OAI-SearchBot) bloqueia.

Bloqueios fora do robots.txt

Firewall e CDN (como o modo anti-bot de alguns provedores) podem bloquear robôs de IA mesmo com o robots.txt liberado. A OpenAI publica as faixas de IP dos robôs dela para quem precisa liberar no firewall.

Os três robôs da OpenAI

  • OAI-SearchBot: busca do ChatGPT.
  • GPTBot: treino de modelos.
  • ChatGPT-User: visita quando uma pessoa pede; não decide se o site aparece na busca.

Um robots.txt que libera a busca e bloqueia o treino

User-agent: OAI-SearchBot / Allow: / e, num grupo separado, User-agent: GPTBot / Disallow: /. Cada robô segue o grupo com o nome dele; o grupo * vale só para quem não tem grupo próprio.

Fontes

Faça isso em minutos, em português

Descreva quem você quer prospectar. Os agentes montam a lista na hora, acham o decisor e deixam WhatsApp e e-mail prontos para enviar.

Só o lead que chega com contato usa crédito. 3 dias grátis do Pro com o cartão (33 leads no teste); cancele quando quiser.

Perguntas relacionadas

Todas as 78 perguntas · Guias por nicho · Modelos · Glossário