Puffinmint
ES
Italiano English Español Français Deutsch Português (Brasil) 日本語 한국어 Polski Türkçe

Probar robots.txt por URL y agente

Prueba reglas robots.txt para una URL y un agente de usuario. Identifica la regla que permite o bloquea la ruta; el permiso no garantiza la indexación.

Ajustes

Introduce una ruta como /pagina o un dominio con ruta, también sin HTTPS. Solo se analiza el robots.txt pegado.

Combina grupos del mismo product token, elige la regla más específica y da prioridad a Allow en caso de empate. No simula extensiones propietarias. Robots.txt no controla el acceso ni garantiza la desindexación. Máximo 500 KiB.

Los datos se envían al servidor para su comprobación. No se envía autenticación al sitio de destino.

Resultado

Contamos qué herramientas se utilizan más, sin incluir los valores introducidos ni el contenido de los archivos en las estadísticas. Privacidad

Cómo usar la herramienta

Pega robots.txt, indica la ruta y el product token del rastreador, como Googlebot. Se analiza el texto sin descargar el sitio.

Método de comprobación

El comprobador compara la ruta con las reglas del grupo aplicable al product token. Une grupos equivalentes y elige la regla más específica; en caso de empate gana Allow.

Cómo interpretar el resultado

En el ejemplo /private/report está bloqueado, mientras /private/public/report está permitido por la regla más específica. Permitir el rastreo no garantiza la indexación ni protege datos privados.

Ejemplo ilustrativo

Ejemplo ilustrativo con datos de prueba: las respuestas reales pueden cambiar.

Datos de entrada
User-agent: * Disallow: /private/ Allow: /private/public/
Resultado
/private/report → Disallow · /private/public/report → Allow

En el ejemplo /private/report está bloqueado, mientras /private/public/report está permitido por la regla más específica. Permitir el rastreo no garantiza la indexación ni protege datos privados.

Límites y tratamiento de datos

Combina grupos del mismo product token, elige la regla más específica y da prioridad a Allow en caso de empate. No simula extensiones propietarias. Robots.txt no controla el acceso ni garantiza la desindexación. Máximo 500 KiB.

Los datos se envían al servidor para su comprobación. No se envía autenticación al sitio de destino.

Los resultados reflejan el momento de la comprobación.

Fuentes

Preguntas frecuentes

¿Qué límites tiene la comprobación?

Combina grupos del mismo product token, elige la regla más específica y da prioridad a Allow en caso de empate. No simula extensiones propietarias. Robots.txt no controla el acceso ni garantiza la desindexación. Máximo 500 KiB. Los resultados reflejan el momento de la comprobación.

También te pueden servir

Ver todas

DNS lookup: consulta los registros de un dominio

Consulta registros A, AAAA, MX, TXT, NS, CNAME y CAA de un dominio. Revisa respuestas y errores sin confundir una consulta con la propagación global.

WHOIS de dominio: consulta los datos RDAP

Consulta registrador, fechas, estados y servidores de nombres publicados mediante RDAP. Los datos ocultos o no disponibles se identifican sin inventarlos.

Comprobar cabeceras de seguridad HTTP

Revisa CSP, HSTS y otras cabeceras HTTP de una página. Consulta sus valores y explicaciones; el análisis no certifica la seguridad completa del sitio.

Favoritos