Strumento gratuito · Generatore
Generatore robots.txt
Crea il file robots.txt per dire ai motori cosa scansionare e cosa no.
Il file robots.txt dice ai motori di ricerca quali parti del sito possono scansionare e quali no. È utile per tenere fuori dall'indice aree tecniche (aree amministrative, carrelli, pagine di servizio) e per segnalare la sitemap.
Attenzione: robots.txt controlla la scansione, non l'indicizzazione, e va usato con criterio — bloccare le pagine sbagliate può farti sparire da Google. Questo generatore copre i casi più comuni in sicurezza.
Come si usa
- Scegli se consentire tutto, bloccare tutto o consentire tutto tranne alcune cartelle.
- Aggiungi l'URL della sitemap (consigliato).
- Copia il contenuto, salvalo come robots.txt e caricalo nella root del sito.
Ti serve una mano oltre allo strumento? Vedi il servizio dedicato o richiedi il Check-up 48h gratuito.
Domande frequenti
robots.txt impedisce l'indicizzazione di una pagina?
Non del tutto: impedisce la scansione, ma una pagina bloccata può comunque comparire in Google se linkata altrove. Per escluderla davvero serve il meta noindex, non robots.txt.
Cosa conviene bloccare?
Tipicamente aree amministrative, pagine di login, carrelli e URL con parametri inutili. Mai bloccare pagine che vuoi posizionare o le risorse (CSS/JS) necessarie a renderizzare il sito.
Dove va caricato?
Nella root del sito, raggiungibile a tuosito.it/robots.txt. È uno dei primi file che i motori leggono.
Lo strumento è un inizio. Le richieste sono l'obiettivo.
Nel Check-up 48h gratuito guardiamo il tuo caso e ti diciamo, dati alla mano, da dove conviene partire.