Probador de
robots.txt
Una línea mal puesta en robots.txt puede ocultar todo tu sitio a Google - o a ChatGPT. Pega tu archivo y tus URLs, elige un rastreador y ve exactamente qué regla decide cada ruta. Se ejecuta en tu navegador: no se sube nada.
¿Qué regla gana? Descúbrelo.
Veredictos por ruta
| Ruta | Veredicto | Regla decisiva |
|---|
Salud del archivo
Yetty escribe y sirve un robots.txt correcto para cada sitio automáticamente - línea de sitemap incluida - con un control de rastreadores de IA de un solo interruptor.
Cómo leen de verdad
los rastreadores tu archivo
Aplica un solo grupo
Un rastreador elige el grupo User-agent más específico que lo nombra. Si existe un grupo específico, el grupo * se ignora por completo - no se fusiona.
Gana la ruta más larga
Las reglas no se leen de arriba abajo. La regla coincidente con la ruta más larga decide, esté donde esté en el archivo.
Allow vence a Disallow en un empate
¿Igual longitud, veredictos opuestos? Gana la regla Allow. Así abres una carpeta dentro de una zona bloqueada.
Comodines: * y $
* coincide con cualquier carácter, $ ancla la regla al final de la URL. Disallow: /*.pdf$ bloquea todos los PDF y nada más.
La trampa de un carácter
Disallow: / lo bloquea todo. Disallow: (vacío) no bloquea nada. Incontables sitios han desaparecido por esa única barra.
Línea de sitemap
Sitemap: https://…/sitemap.xml también pertenece a robots.txt - así los rastreadores encuentran tu lista de páginas sin adivinar.
La gente también pregunta
¿Cómo pruebo mi archivo robots.txt?
Pega tu robots.txt y una lista de rutas en este probador, elige el rastreador que te interesa y obtienes un veredicto ALLOWED o BLOCKED por ruta con la línea exacta que lo decidió. Aplica las reglas reales que usan los rastreadores: gana el grupo de user-agent más específico, luego la ruta coincidente más larga, y Allow vence a Disallow en un empate.
¿Importa el orden de las reglas en robots.txt?
No - y eso sorprende a casi todos. Los rastreadores no leen las reglas de arriba abajo. Dentro del grupo que les aplica, gana la regla con la ruta coincidente más larga, esté donde esté en el archivo. Si un Allow y un Disallow coinciden con igual longitud, gana Allow. El orden solo importa para la legibilidad.
¿Qué significa Disallow con solo una barra en robots.txt?
Disallow: / bloquea todo el sitio para los user-agents que cubra ese grupo, porque cada ruta empieza con una barra. Un Disallow: vacío (sin nada tras los dos puntos) significa lo contrario: no bloquear nada. Un solo carácter separa "bienvenido" de "lárgate", por eso probar vence a adivinar.
Más herramientas gratuitas:
¿Puede la IA ver tu sitio web? ·
Visualizador de cadenas de redirección ·
Todas las herramientas gratuitas
¿Prefieres no volver a tocar este archivo? Ve el SEO en piloto automático