Generador robots.txt
Genera un robots.txt impecable: reglas por bot, sitemap, allow/disallow con validación visual.
Cómo usar
- 1
Plantilla
Sitio abierto, bloqueo staging o acceso selectivo.
- 2
Descarga
Coloca en /robots.txt.
Detalles técnicos
robots.txt indica a los rastreadores qué partes pueden indexar (RFC 9309).
Las directivas User-agent, Allow, Disallow y Sitemap son entendidas por todos los buscadores.
Preguntas frecuentes
¿Dónde colocarlo?
En la raíz del dominio.
¿Permitir todo?
User-agent: *, Allow: /.
¿Google lo respeta?
Sí.
Revisado por:Equipo de ingeniería de Easy Converter
Esta herramienta fue probada y calibrada por nuestro equipo de ingeniería. Todo el procesamiento es local en tu navegador.