Guida

Robots.txt: come configurarlo bene per non bloccare la Sua scalata su Google?

Questa domanda torna con quasi tutti gli imprenditori che seguiamo — e le risposte che circolano sono raramente complete. Ecco cosa funziona davvero, in base alla pratica sul campo.

4 luglio 2026

TL;DR

Il robots.txt è un piccolo file dal potere smisurato: bastano poche righe per vietare a Google l'esplorazione di tutto il Suo sito. Ben configurato, passa inosservato; mal configurato, annulla tutti i Suoi sforzi SEO — è una delle prime verifiche di ogni audit. PageOneBoost applica questo metodo per i suoi clienti — pagamento unico all'anno a partire da 300 €, senza abbonamento mensile, audit gratuito.

Cosa bisogna capire

Capire cosa controlla: l'esplorazione, non l'indicizzazione : Il robots.txt dice ai robot quali zone possono percorrere. Sottigliezza importante: una pagina bloccata all'esplorazione può comunque comparire nell'indice se dei link puntano verso di essa — per deindicizzare serve il tag noindex, non il robots.txt.

Dare la caccia al Disallow: / assassino : La riga «Disallow: /» vieta l'intero sito: è l'impostazione predefinita di molti ambienti di sviluppo, a volte dimenticata alla messa online. Sito invisibile, traffico a zero — verifichi questo file dopo ogni messa in produzione.

Bloccare ciò che non ha niente da fare su Google : Aree di amministrazione, carrelli, risultati di ricerca interna, parametri di ordinamento: questi URL senza valore per gli utenti sprecano il budget di scansione. Il robots.txt li mette da parte in modo pulito.

Il metodo, punto per punto

Non bloccare mai CSS e JavaScript : Google ha bisogno di caricare i Suoi stili e script per visualizzare la pagina come un visitatore. Bloccarli gli impedisce di valutare correttamente il rendering mobile e l'esperienza — un'eredità di vecchie pratiche da bandire.

Dichiarare la sitemap e testare : Aggiunga la riga Sitemap: con l'URL completo della Sua sitemap: i robot la trovano al primo passaggio. Testi poi il file dalla Search Console per confermare che le Sue pagine importanti siano davvero esplorabili.

Capire cosa controlla: l'esplorazione, non l'indicizzazione
Dare la caccia al Disallow: / assassino
Bloccare ciò che non ha niente da fare su Google
Non bloccare mai CSS e JavaScript
Dichiarare la sitemap e testare

Cosa fa PageOneBoost per te

Tutto quello che precede richiede tempo, metodo ed esperienza. È esattamente il lavoro di PageOneBoost: audit gratuito per misurare il Suo potenziale, poi costruzione della base completa — tecnica, contenuti, scheda Google Business, recensioni, autorevolezza — per puntare alla prima pagina in modo duraturo.

Il nostro modello è semplice: un pagamento unico all'anno, a partire da 300 €, senza abbonamento mensile. Il servizio copre 12 mesi e si rinnova tacitamente. Metodo 100% white-hat, risultati misurabili. Per parlarne: +33 1 84 80 13 42.

Domande frequenti

Dove si trova il file robots.txt del mio sito?

Sempre alla radice del dominio: suodominio.it/robots.txt. Digiti quell'indirizzo nel browser — il file è pubblico, compresi quelli dei Suoi concorrenti.

Il mio robots.txt blocca una pagina che voglio deindicizzare: va bene?

No, è il controsenso classico: bloccata all'esplorazione, la pagina non può più mostrare il suo tag noindex a Google e può restare nell'indice. Autorizzi l'esplorazione, imposti il noindex e lasci che Google lo constati.

Un sito può fare a meno del robots.txt?

Sì — senza file, i robot esplorano tutto, il che va bene per un piccolo sito senza zone sensibili. Ma un file minimale che dichiara la sitemap resta una buona pratica che costa solo un minuto.

Si può garantire la prima posizione su Google?

No — nessuno controlla l'algoritmo di Google, e una «posizione garantita» è un campanello d'allarme, non un argomento di vendita. Quello che si può garantire: un metodo collaudato, 100% white-hat, e progressi misurabili.

Da dove cominciare, in pratica?

Da una diagnosi: indicizzazione, posizioni attuali, scheda Google Business, tecnica. È esattamente ciò che copre l'audit gratuito di PageOneBoost — sa a che punto è prima di investire qualsiasi cifra.

Passa in prima pagina su Google

Audit gratuito, pagamento unico all'anno a partire da 300 €, senza abbonamento mensile. PageOneBoost costruisce la Sua visibilità perché duri nel tempo.

Richiedi il mio audit gratuito