Crawl Budget: Definition & Maßnahmen
Suchmaschinen wie Google durchsuchen das Internet mithilfe von sogenannten Crawlern. Dabei stoßen sie auf Milliarden von Webseiten, die sie erfassen und für die Suchergebnisse auswerten. Doch nicht jede Seite wird beliebig oft oder vollständig gecrawlt – dafür gibt es das Crawl Budget. Besonders für Online-Shops oder umfangreiche Websites ist ein optimiertes Crawling Budget essenziell, um sicherzustellen, dass die wichtigsten Seiten von Google priorisiert erfasst werden.