Gratis y centrado en la privacidad
Última actualización:
Prueba reglas de robots.txt contra user-agent y rutas URL con lógica de precedencia determinista.
Que resuelve esta herramienta
Usa esta herramienta cuando necesites una decisión de rastreo por URL para un bot específico: antes de desplegar un cambio en robots.txt, después de una migración de CMS, o cuando un crawler se comporta inesperadamente en una ruta que creías abierta.
El resultado para cada URL muestra tres cosas: el grupo de user-agent coincidente, la regla ganadora y el veredicto final de allow o disallow. Un resultado allow limpio significa que la URL pasa la verificación de robots. Un resultado disallow con una regla ganadora específica muestra exactamente qué directiva está bloqueando la ruta. Si ninguna regla coincidió, la URL está implícitamente permitida.
Siguiente paso
Prueba reglas de robots.txt contra user-agent y rutas URL con lógica de precedencia determinista.
Revisión editorial
Esta página combina la herramienta en vivo, ayuda de entradas, ejemplos trabajados y límites operativos para que Probador de Robots.txt sea útil sin depender de anuncios.
Revisado por Klartext Tools frente al flujo actual de Probador de Robots.txt el 2026-03-06.
Última actualización:
Usar con criterio
Alcance de la página
Una configuración común que bloquea un área admin pero permite una ruta de ayuda específica y una ruta de vista previa para Googlebot.
Útil para ver como una regla allow más específica puede anular un patrón disallow más amplio.
Cambia el user-agent después de cargar el ejemplo para comparar cómo varía el veredicto para otros crawlers.
Un conjunto de reglas que solo funciona cómo se espera cuando los query strings se incluyen en la lógica de coincidencia.
Útil para verificar si el manejo de query strings cambia una decisión de rastreo para URLs de búsqueda o checkout.
Cambia el modo de coincidencia a solo ruta después de cargar el ejemplo para ver cómo cambia el veredicto.
Pega el contenido de robots.txt que quieres probar: no solo la sección relevante, sino el archivo completo para que las interacciones de grupo se resuelvan correctamente.
Pega el contenido completo de robots.txt en el área de entrada.
Introduce el nombre del user-agent que quieres probar, cómo Googlebot o un token de crawler personalizado.
Añade las rutas URL a verificar, una por línea: usa URLs completas o cadenas de solo ruta.
Elige el modo de sintaxis strict o permisivo y si incluir query strings en la coincidencia.
Ejecuta el tester y verifica el grupo coincidente, la regla ganadora y el veredicto de allow o disallow para cada ruta.
Carga un archivo de control de rastreo simple o un conjunto de reglas sensibles a query para probar precedencia, anulaciones allow y targeting de user-agent.
Una configuración común que bloquea un área admin pero permite una ruta de ayuda específica y una ruta de vista previa para Googlebot.
Entradas de ejemplo
Resultado de ejemplo: Útil para ver como una regla allow más específica puede anular un patrón disallow más amplio.
Cambia el user-agent después de cargar el ejemplo para comparar cómo varía el veredicto para otros crawlers.
Un conjunto de reglas que solo funciona cómo se espera cuando los query strings se incluyen en la lógica de coincidencia.
Entradas de ejemplo
Resultado de ejemplo: Útil para verificar si el manejo de query strings cambia una decisión de rastreo para URLs de búsqueda o checkout.
Cambia el modo de coincidencia a solo ruta después de cargar el ejemplo para ver cómo cambia el veredicto.
Las reglas de robots.txt interactúan de formas no siempre intuitivas: los grupos de user-agent específicos anulan al wildcard, las directivas allow más largas tienen precedencia sobre las disallow más cortas, y algunos crawlers interpretan la sintaxis de forma diferente. Sin pruebas explícitas, es difícil saber qué URLs están realmente bloqueadas para qué bots. Esta herramienta ejecuta la lógica de precedencia determinista de robots.txt contra las URLs y user-agents que especifiques para que puedas verificar el comportamiento antes de publicar cambios.
Pega el contenido de tu robots.txt, introduce el nombre del crawler que quieres probar y proporciona una o más rutas URL. El tester evalúa qué grupo de user-agent aplica, encuentra la directiva coincidente más específica y devuelve un veredicto de allow o disallow para cada URL: junto con la regla ganadora y el grupo que la rige.
Cuando múltiples reglas podrían coincidir con una URL, gana la coincidencia de ruta más larga independientemente del orden de las reglas. Una directiva allow específica para /admin/help/ supera un disallow más amplio para /admin/ porque es más larga. Si dos reglas tienen la misma longitud de ruta, allow tiene precedencia sobre disallow. Los grupos de user-agent específicos tienen prioridad sobre el grupo wildcard (*).
El tester primero busca un grupo que nombre exactamente el user-agent introducido (sin distinguir mayúsculas). Si no existe un grupo nombrado, recurre al grupo wildcard (*). Un bot que coincide con un grupo nombrado no está también gobernado por el grupo wildcard: solo aplica la coincidencia más específica.
El resultado para cada URL muestra tres cosas: el grupo de user-agent coincidente, la regla ganadora y el veredicto final de allow o disallow. Un resultado allow limpio significa que la URL pasa la verificación de robots. Un resultado disallow con una regla ganadora específica muestra exactamente qué directiva está bloqueando la ruta. Si ninguna regla coincidió, la URL está implícitamente permitida.
El modo strict marca directivas que no se ajustan precisamente a la especificación robots.txt: útil cuando quieres detectar casos límite que algunos crawlers podrían rechazar. El modo permisivo aplica un parser más tolerante que acepta patrones informales comunes. Usa el modo strict antes de desplegar cambios en un archivo de producción; usa el modo permisivo cuando analices un archivo existente que no escribiste tú.
Por defecto el tester coincide solo en la ruta URL, ignorando los query strings: que es cómo se comportan la mayoría de los crawlers principales. Cambiar al modo ruta y query incluye el query string completo en la coincidencia de patrones, lo que es relevante si tu robots.txt usa directivas cómo Disallow: /search?session=. Prueba ambos modos cuando tus reglas incluyan patrones sensibles a query.
La mayoría de errores de robots en un lanzamiento se pueden evitar. El problema no es que robots.txt sea difícil. El problema es que los equipos lo revisan demasiado tarde, prueban demasiado poco o confunden unas cuantas URLs correctas con una política de rastreo segura.
Los errores de hreflang son costosos porque desperdician el trabajo de localización después del lanzamiento. Una versión multilingüe puede parecer estructuralmente completa y aún así fallar en la segmentación por idioma si los enlaces recíprocos, el mapeo de URLs o la disponibilidad de páginas no se comprueban antes de publicar.
Estas herramientas se solapan, pero responden preguntas distintas durante un lanzamiento. El auditor de robots.txt es mejor cuando necesitas revisar el archivo completo como una política. El probador de robots.txt es mejor cuando necesitas una respuesta clara para una URL concreta y un bot concreto.
Los equipos pequeños suelen llegar a un punto de decisión antes del lanzamiento: ¿son suficientes las herramientas basadas en navegador gratuitas o esta publicación justifica una suite SEO de pago? La respuesta honesta depende menos de la ideología y más de la escala, la responsabilidad y la cantidad de riesgo concentrado en la ventana de lanzamiento.
Los operadores individuales y los publishers independientes no necesitan una QA de nivel agencia. Necesitan una revisión corta y repetible que realmente vayan a ejecutar antes de publicar. El fallo más frecuente en los lanzamientos de sitios pequeños no es usar el método incorrecto, sino saltarse completamente la revisión porque ningún proceso obliga a hacerla. Esta shortlist cubre las herramientas en navegador que eliminan los errores de mayor riesgo en el menor tiempo posible para sitios construidos y publicados por una o dos personas.
Utilidades técnicas para sitios web: robots.txt, hreflang, validación de sitemaps, rastreo y diagnóstico de rendimiento.
Ejecuta una auditoría estructural completa del archivo: conflictos, advertencias de sintaxis y verificaciones de buenas prácticas en todos los grupos.
Verifica que las URLs que quieres rastrear están representadas correctamente en el sitemap.
Valida las anotaciones de páginas internacionales una vez confirmado el acceso de rastreo.
Si el problema va más allá de esta categoría, estas herramientas de otras áreas te ayudan con el siguiente paso.
Modela el crecimiento a largo plazo desde capital inicial, aportaciones periódicas e inflación antes de fijar un plan de ahorro.
Abrir herramientaProyecta como un saldo inicial y aportaciones mensuales regulares crecen con interés compuesto a lo largo de cualquier horizonte temporal.
Abrir herramientaProyecta tu capital de jubilación a partir del portfolio actual, aportaciones mensuales, rentabilidad esperada y tasa de inflación.
Abrir herramientaAnaliza raíces, vértice, eje de simetría y comportamiento de la curva en una ejecución.
Abrir herramienta