Generador de robots.txt

Crea un archivo robots.txt con user-agents, rutas permitidas o bloqueadas y sitemap. Revisa las reglas antes de copiarlo o descargarlo.

Procesado en el navegador: los datos no se suben.

Configura los datos

User-agent

Rutas Allow (una por línea)

Rutas Disallow (una por línea)

URL Sitemap (opcional)

Completa un grupo User-agent con rutas Allow/Disallow, una por línea, y Sitemap opcional. Descarga y revisa antes de sustituir un archivo existente.

El resultado aparecerá aquí.

Contamos qué herramientas se utilizan más, sin incluir los valores introducidos ni el contenido de los archivos en las estadísticas. Privacidad

Puedes introducir el dominio con o sin www e incluir una ruta y parámetros. Si omites el protocolo se utiliza HTTPS.
Completa un grupo User-agent con rutas Allow/Disallow, una por línea, y Sitemap opcional.
Descarga y revisa antes de sustituir un archivo existente.

robots.txt controla el rastreo: no protege datos ni garantiza desindexación.

Instálalo en la raíz y revisa las reglas.

Datos de entrada

Resultado

User-agent: * Allow: / Disallow: /private/ Sitemap: https://example.com/sitemap.xml

Límites y comprobaciones
Parámetro	Valor
Rutas Allow (una por línea)	≤ 5000000 caracteres
Rutas Disallow (una por línea)	≤ 5000000 caracteres