Testador de
robots.txt
Uma linha errada no robots.txt pode esconder seu site inteiro do Google - ou do ChatGPT. Cole seu arquivo e suas URLs, escolha um rastreador e veja exatamente qual regra decide cada caminho. Roda no seu navegador - nada é enviado.
Qual regra vence? Descubra.
Veredictos por caminho
| Caminho | Veredicto | Regra decisiva |
|---|
Saúde do arquivo
A Yetty escreve e serve um robots.txt correto para todo site automaticamente - linha de sitemap incluída - com um controle de rastreadores de IA de um só interruptor.
Como os rastreadores realmente
leem seu arquivo
Um grupo se aplica
Um rastreador escolhe o grupo User-agent mais específico que o nomeia. Se existe um grupo específico, o grupo * é ignorado por completo - não é mesclado.
O caminho mais longo vence
As regras não são lidas de cima para baixo. A regra correspondente com o caminho mais longo decide - onde quer que esteja no arquivo.
Allow vence Disallow em um empate
Comprimento igual, veredictos opostos? A regra Allow vence. É assim que você abre uma pasta dentro de uma área bloqueada.
Curingas: * e $
* corresponde a qualquer caractere, $ fixa a regra ao fim da URL. Disallow: /*.pdf$ bloqueia todo PDF e nada mais.
A armadilha de um caractere
Disallow: / bloqueia tudo. Disallow: (vazio) não bloqueia nada. Incontáveis sites sumiram por causa daquela única barra.
Linha de sitemap
Sitemap: https://…/sitemap.xml pertence ao robots.txt também - é como os rastreadores acham sua lista de páginas sem adivinhar.
As pessoas também perguntam
Como testo meu arquivo robots.txt?
Cole seu robots.txt e uma lista de caminhos neste testador, escolha o rastreador que lhe interessa e receba um veredicto ALLOWED ou BLOCKED por caminho com a linha exata que o decidiu. Ele aplica as regras reais que os rastreadores usam: o grupo de user-agent mais específico vence, depois o caminho correspondente mais longo, e Allow vence Disallow em um empate.
A ordem das regras no robots.txt importa?
Não - e isso surpreende quase todo mundo. Rastreadores não leem as regras de cima para baixo. Dentro do grupo que se aplica a eles, a regra com o caminho correspondente mais longo vence, onde quer que esteja no arquivo. Se um Allow e um Disallow coincidem com igual comprimento, Allow vence. A ordem só importa para a legibilidade.
O que significa Disallow com apenas uma barra no robots.txt?
Disallow: / bloqueia o site inteiro para quaisquer user-agents que aquele grupo cobre, porque todo caminho começa com uma barra. Um Disallow: vazio (sem nada após os dois-pontos) significa o oposto - não bloquear nada. Um único caractere separa "bem-vindo" de "vá embora", por isso testar vence adivinhar.
Mais ferramentas gratuitas:
A IA consegue ver seu site? ·
Visualizador de cadeias de redirecionamento ·
Todas as ferramentas gratuitas
Prefere nunca mais tocar neste arquivo? Veja o SEO no piloto automático