Cos'è il crawl budget
Immagina che Google abbia un esercito di piccoli robot (si chiamano crawler o Googlebot) che girano per internet a leggere i siti web. Ogni giorno, questi robot hanno un tempo limitato da dedicare al tuo sito.
Quel tempo si chiama crawl budget: in pratica, quante pagine del tuo sito Google è disposto a visitare e analizzare in un dato periodo.
Esempio concreto: hai un negozio online con 10.000 prodotti. Google, in una settimana, riesce a visitarne solo 3.000. Le altre 7.000 pagine potrebbero non apparire mai su Google, anche se sono perfette. Il tuo potenziale cliente cerca quel prodotto, ma Google non lo conosce nemmeno.
Come funziona (spiegato semplice)
Google non ha risorse infinite. Deve gestire miliardi di siti web nel mondo, quindi assegna a ciascuno un "credito" di scansione basato su due fattori principali:
- Quanto è popolare il tuo sito (più link ricevi, più budget ottieni)
- Quanto è veloce e pulito il tuo sito (se è lento o pieno di errori, Google spreca tempo prezioso)
Se il tuo sito ha molte pagine inutili, duplicate o rotte, Google perde tempo a visitarle e non arriva a quelle importanti. È come se invitassi qualcuno a casa tua e lo facessi girare per ore tra stanze vuote, prima di mostrargli il salotto.
A cosa serve nella pratica
Ottimizzare il crawl budget significa aiutare Google a trovare le pagine giuste nel minor tempo possibile. Ecco come si fa concretamente:
- Eliminare le pagine inutili: pagine di filtri, tag duplicati, versioni vecchie di articoli
- Usare il file robots.txt per dire a Google dove non andare
- Velocizzare il sito: un sito lento consuma più budget per ogni pagina visitata
- Sistemare i link rotti: ogni errore 404 è tempo sprecato dal crawler
Tool come Google Search Console (gratuito) ti mostrano quante pagine Google sta visitando sul tuo sito e se ci sono problemi. Anche Screaming Frog è molto usato dai professionisti per analizzare lo stato del sito e trovare le pagine che sprecano budget.
Perché ti riguarda (anche se non sei un tecnico)
Se hai un sito piccolo con poche pagine, il crawl budget non è un problema urgente. Google visiterà tutto senza difficoltà.
Ma se sei un freelancer con un blog che ha accumulato centinaia di articoli nel tempo, o un piccolo imprenditore con un e-commerce, il discorso cambia.
Ogni pagina inutile che pubblichi è un ostacolo tra Google e i tuoi contenuti migliori. Significa meno visibilità, meno traffico, meno clienti.
La buona notizia? Bastano poche azioni pratiche per migliorare la situazione. Non serve essere sviluppatori: capire il problema è già metà della soluzione.
In sintesi: il crawl budget è come il tempo che un cliente ha per visitare il tuo negozio. Se lo fai perdere tra scaffali vuoti, non arriva mai alla cassa.