Aktualisiert am
Das Crawl Budget ist die Menge an Seiten, die der Googlebot auf einer Website in einem bestimmten Zeitraum crawlen kann und will. Es ergibt sich aus der Crawl-Kapazität (wie viel Ihr Server verträgt) und dem Crawl-Bedarf (wie wichtig und aktuell Google Ihre Inhalte findet).
Für wen ist es relevant?
Für die meisten Websites mit einigen hundert oder tausend Seiten ist das Crawl Budget kein Problem. Wichtig wird es bei großen Onlineshops, Portalen mit vielen Filtern und Websites mit sehr vielen automatisch erzeugten URLs.
Was Crawl Budget verschwendet
- Filter- und Parameter-URLs ohne eigenen Mehrwert
- Weiterleitungsketten und defekte Links
- Doppelte Inhalte ohne Canonical
- Langsame Server und Fehler mit Status 5xx
- Endlose Kalender oder Suchseiten
So optimieren Sie es
- Unwichtige Bereiche per robots.txt sperren
- Eine saubere XML-Sitemap pflegen
- Interne Links auf wichtige Seiten lenken
- Ladezeit des Servers verbessern
Die Crawling-Statistiken in der Google Search Console zeigen, wie oft Google Ihre Website besucht.
Digitalman optimiert das Crawling großer Websites, mehr dazu auf der Seite Onpage SEO.
Digitalman hilft
Suchen Sie eine passende Online-Marketing-Strategie?
Wir analysieren Ihre Ausgangslage und empfehlen die Kanäle, die sich für Sie wirklich lohnen. Die ersten 60 Minuten Beratung sind kostenlos.