Glossario
Crawl budget
Definizione
Il crawl budget è il numero di pagine che un motore di ricerca scansionerà sul tuo sito in un dato periodo, modellato da dimensioni, salute e domanda.
Per i siti piccoli è raramente un vincolo. Per quelli grandi, sprecarlo su URL duplicati, filtri infiniti o pagine rotte significa che i contenuti importanti vengono scansionati meno spesso.
Lo proteggi con link interni puliti, una sitemap ordinata, regole robots.txt corrette e rimuovendo o consolidando gli URL di scarso valore.