Generatore robots.txt
Genera un robots.txt impeccabile: regole per bot, sitemap, allow/disallow con validazione visiva.
Come usare
- 1
Modello
Sito aperto, blocco staging o accesso selettivo.
- 2
Scarica
Colloca in /robots.txt.
Dettagli tecnici
robots.txt indica ai crawler quali aree indicizzare (RFC 9309).
Direttive User-agent, Allow, Disallow e Sitemap sono comprese da tutti i motori principali.
Domande frequenti
Dove?
Nella root del dominio.
Permettere tutto?
User-agent: *, Allow: /.
Google lo rispetta?
Sì.
Revisionato da:Team di ingegneria Easy Converter
Strumento testato e calibrato dal nostro team di ingegneria. Tutto avviene localmente nel tuo browser.