Gerador robots.txt
Gere um robots.txt impecável: regras por bot, sitemap, allow/disallow com validação visual.
Como usar
- 1
Modelo
Site aberto, bloqueio de staging ou acesso seletivo.
- 2
Baixar
Coloque em /robots.txt.
Detalhes técnicos
robots.txt informa aos crawlers quais partes indexar (RFC 9309).
Diretivas User-agent, Allow, Disallow e Sitemap são compreendidas por todos os principais motores.
Perguntas frequentes
Onde colocar?
Na raiz do domínio.
Permitir tudo?
User-agent: *, Allow: /.
Google respeita?
Sim.
Revisado por:Equipe de engenharia da Easy Converter
Esta ferramenta foi testada e calibrada por nossa equipe. Tudo acontece localmente no seu navegador.