--- title: "Verificador de robots.txt para IA" description: "Confira quais regras de rastreamento se aplicam a uma página para bots de busca e treinamento. Cole seu arquivo e veja a regra decisiva por agente." canonical: "https://tropk.ai/recursos/ferramentas/verificador-robots-txt-ia" last_modified: "2026-10-12T16:14:27.014Z" --- # Verificador de robots.txt para IA Revisado em 2026-10-06. ## Uma regra diferente pode valer para cada bot O [robots.txt](/recursos/glossario/robots-txt) comunica preferências de [rastreamento](/recursos/glossario/rastreamento). Esta ferramenta ajuda times de [SEO](/recursos/glossario/seo), conteúdo e agências a conferir o arquivo antes de pedir uma alteração técnica: ela mostra a regra aplicável a um caminho, em vez de concluir que o site inteiro está liberado ou bloqueado. Busca e treinamento são decisões diferentes. A OpenAI usa [OAI-SearchBot](/recursos/glossario/oai-searchbot) para busca e [GPTBot](/recursos/glossario/gptbot) para coleta que pode alimentar treinamento. O [Google-Extended](/recursos/glossario/google-extended) é um controle de uso para IA, sem efeito sobre inclusão ou ranking na Busca do Google. Os resultados identificam o propósito de cada token. ## Como obter o arquivo e usar o teste - Abra o endereço do seu domínio seguido de /robots.txt. Copie o texto exibido, incluindo todos os grupos User-agent. - Cole o conteúdo na ferramenta. Em “Caminho da página a testar”, informe somente o caminho, como /blog/guia ou /produto. Se a URL contém parâmetros relevantes, mantenha-os no caminho. - Clique em Verificar regras. O exemplo demonstra busca permitida e treinamento bloqueado; ele não é um arquivo recomendado para qualquer negócio. - Confira a linha indicada em cada resultado. Copie ou baixe o relatório para discutir a mudança com a pessoa responsável pelo site. ## Como interpretar o resultado “Permitido pela regra” significa que as diretivas fornecidas não impedem aquele token de acessar aquele caminho. “Bloqueado pela regra” aponta a diretiva que prevaleceu. Um grupo específico substitui o grupo geral; grupos aplicáveis ao mesmo token são reunidos. Entre caminhos correspondentes, prevalece o mais específico; Allow ganha um empate. O teste considera \* e $ e compara caminhos com distinção de maiúsculas e escapes de URL. Teste páginas de funções diferentes: home, conteúdo, produtos e áreas privadas. Uma regra para / não tem necessariamente o mesmo resultado de /privado/ ou /privado/publico/. Um bloqueio intencional de treinamento deve ser preservado ao revisar acesso para busca. ## O que conferir depois da correção Peça ao responsável técnico para revisar a versão final, publicar no domínio correto e confirmar a resposta HTTP do arquivo. Repita o teste com a versão publicada e os caminhos importantes. Examine também firewall, CDN e registros de acesso quando houver um problema de rastreamento. O teste lê o texto colado: não consulta o domínio, não verifica cabeçalhos, login, firewall ou solicitações reais dos bots. [ChatGPT-User](/recursos/glossario/chatgpt-user) é acionado por usuários e suas visitas podem não seguir as mesmas regras; ele não é tratado como prova de [indexação](/recursos/glossario/indexacao). Extensões como [Content Signals](/recursos/glossario/content-signals) e [Crawl-delay](/recursos/glossario/crawl-delay) não recebem uma interpretação de permissão nesta ferramenta. Robots.txt não protege dados privados e uma regra de acesso não garante indexação, recomendação ou citação. ## Usar a ferramenta Abra a [ferramenta interativa]() para informar sua entrada e verificar o resultado. ## Fontes e referências - [Robots Exclusion Protocol — RFC 9309]() — IETF - [OpenAI Crawlers]() — OpenAI - [Bots da Anthropic e controles de rastreamento]() — Anthropic - [Rastreadores comuns do Google]() — Google ## Continue a leitura - [Checklist de AI readiness]() - [Inspecionador de HTML para IA]() - [Rastreamento]() - [Validador de JSON-LD]() - [robots.txt]() - [Auditoria de presença em IA]() - [Monitoramento de respostas em IA]() ## Sobre o autor [Vinicius Pacheco]() Responsável pelos conteúdos técnicos da Tropk, com foco em rastreamento, indexação, dados estruturados e acesso de agentes ao conteúdo. --- [Todas as páginas em Markdown]()