Generador de robots.txt gratuito
El Generador de robots.txt construye un archivo robots.txt que indica a los rastreadores de motores de búsqueda qué partes de tu sitio rastrear o evitar. Añade tus reglas y sitemap, y copia el resultado.
Cómo usarlo
Introduce las rutas a disallow o allow (una por línea), fija el user-agent, añade la URL de tu sitemap y el robots.txt se genera en vivo.
- Una regla por línea para allow/disallow
- Referencia de sitemap opcional
- Copia a la raíz de tu sitio
Herramientas SEO y para webmasters relacionadas
También te puede interesar
Herramientas de otras categorías que suelen combinarse con Robots.txt: