Generador de robots.txt

Genera un archivo robots.txt

Un archivo robots.txt indica a los rastreadores de motores de búsqueda qué páginas o secciones de tu sitio pueden o no pueden visitar. Coloca el archivo generado en la raíz de tu dominio.

Todo funciona en tu navegador — nada se envía a un servidor.

Preguntas frecuentes

¿Qué significa Allow: /? Indica a todos los bots que pueden rastrear todo el sitio.

¿Debo listar cada página a bloquear? No — solo lista los prefijos de ruta que deseas bloquear.