Probador de Robots.txt

Prueba tu archivo robots.txt y verifica si tus URLs están permitidas o bloqueadas para los diferentes user-agents.

Resultado

Introduce los datos y haz clic en "Probar" para ver el resultado.

¿Cómo usar esta herramienta?

1. Introduce el robots.txt

Copia y pega el contenido de tu archivo robots.txt o cárgalo desde una URL usando el botón "Cargar desde URL".

2. Especifica la URL

Introduce la URL completa que quieres probar (ejemplo: https://tudominio.com/ruta/pagina.html).

3. Selecciona el User-Agent

Elige el robot que quieres simular (Googlebot, Bingbot, etc.) o usa uno personalizado.

4. Prueba y analiza

Haz clic en "Probar" para ver si la URL está permitida o bloqueada para ese user-agent específico.

💡 Consejos

  • Las reglas más específicas tienen prioridad sobre las generales
  • El símbolo * aplica a todos los user-agents
  • Los patrones con * coinciden con cualquier secuencia de caracteres
  • Disallow: sin valor permite todo
  • Allow: tiene prioridad sobre Disallow: cuando hay coincidencias