Google aggiorna la guida sul crawl budget senza introdurre nuove funzionalità, mentre Bing offre un controllo granulare della scansione
Stai allocando budget per campagne SEO e ti accorgi che Google non indicizza le pagine chiave. Non è un bug: è il crawl budget che ti sta limitando. La guida ufficiale di Google definisce il crawl budget come l’insieme di URL che Google può e vuole indicizzare. Due elementi lo determinano: il limite di capacità di crawling e la domanda di crawling. Per chi gestisce campagne a performance, tradurre questo meccanismo in termini operativi è la differenza tra visibilità e budget sprecato.
Il meccanismo nascosto che frena le tue campagne
Ogni sito parte con lo stesso limite di capacità di crawl conservativo predefinito. Non importa quanto spendi in ads o quanto spingi i contenuti: Googlebot parte da una soglia uguale per tutti, e la adegua solo dopo aver valutato la salute del server e la qualità percepita del dominio. Se gestisci un e-commerce con decine di migliaia di SKU o un portale editoriale con articoli che ruotano ogni giorno, questo limite diventa un collo di bottiglia operativo. I siti con oltre 10.000 pagine rischiano concretamente di non essere indicizzati o ricontrollati da Google in tempi utili.
Il concetto non è nuovo. Già nel gennaio 2017, Gary Illyes di Google pubblicò la prima spiegazione ufficiale del crawl budget, definendolo come il numero di URL che Googlebot può e vuole indicizzare. Nell’estate del 2025, Google ha aggiornato la guida per, come riportato da Barry Schwartz su Search Engine Roundtable, «migliorare chiarezza, coerenza terminologica e flusso». L’aggiornamento, registrato nel changelog ufficiale del 22 luglio, non ha introdotto nuove funzionalità: ha solo reso più leggibile un meccanismo che esiste da quasi un decennio.
Per un media buyer, il punto è uno solo: Google ti spiega come funziona il limite, ma non ti dà leve per gestirlo. Puoi ottimizzare la struttura del sito, eliminare URL duplicati, migliorare i tempi di risposta del server. Azioni importanti, certo, ma indirette. Non esiste un cursore in Search Console che ti permetta di dire a Googlebot «accelera su queste pagine perché sto spingendo una campagna». E quando il crawl budget si satura, le pagine chiave su cui hai investito in link building e contenuti restano fuori dall’indice. Il traffico organico non arriva, il CPA della componente SEO sale e il ROAS complessivo della campagna ne risente.
Perché Bing sta vincendo la partita del controllo
Mentre Google resta sul piano teorico, Bing ha messo a disposizione dei webmaster uno strumento concreto: il Crawl Control in Bing Webmaster Tools permette di regolare la frequenza di scansione di Bingbot ora per ora. Non si tratta di una configurazione una tantum o di un suggerimento indiretto: è un controllo granulare che ti consente di aumentare o ridurre la velocità di crawl in base alle esigenze operative.
Per chi gestisce campagne su più canali, questa differenza è sostanziale. Immagina di lanciare una nuova linea di prodotti: con Bing puoi alzare il crawl rate nelle ore successive al deploy delle pagine, riducendo il tempo tra la pubblicazione e l’indicizzazione. Con Google, puoi solo inviare una sitemap e attendere che l’algoritmo decida quando e quanto scansionare. Non è una questione di preferenza tra motori: è sapere dove puoi agire concretamente sul budget di scansione e dove invece sei un osservatore passivo di un meccanismo automatico.
Il trade-off è chiaro. Google processa volumi di query enormemente superiori e resta il motore dominante per quota di traffico. Ma su siti grandi, dove il crawl budget è un fattore limitante reale, Bing offre una leva operativa che Google non ha mai reso disponibile. Per un performance marketer, ignorare questa asimmetria significa lasciare valore sul tavolo, soprattutto se il pubblico di riferimento ha una presenza significativa sull’ecosistema Microsoft.
Da ascoltatore passivo a regista del crawl: cosa fare oggi
Dopo aver visto i due mondi, la domanda operativa è immediata: cosa puoi fare nel concreto? Per i siti con oltre 10.000 pagine, il primo passo è monitorare il crawl budget in Search Console: controlla quante pagine vengono scansionate ogni giorno, identifica gli URL a basso valore che consumano risorse di crawl e intervenire sulla struttura per liberare capacità per le pagine strategiche. In parallelo, attiva Crawl Control su Bing Webmaster Tools e testa l’impatto di un crawl rate più aggressivo nelle finestre temporali in cui pubblichi nuovi contenuti o aggiorni pagine chiave. Misura il delta in termini di tempo di indicizzazione e, a valle, di traffico organico incrementale. Non si tratta di scegliere un motore, ma di sapere dove puoi agire concretamente. La differenza, per chi alloca budget, è tra sperare che l’algoritmo faccia il suo corso e prendere il controllo di ciò che è tecnicamente gestibile. Su Google monitori e ottimizzi i segnali; su Bing, regoli la velocità. Oggi, chi gestisce campagne ha gli strumenti per fare entrambe le cose.
