Das Crawl-Budget wird oft so dargestellt, als wäre es ein Regler, den man jede Woche neu einstellen müsste, doch für die meisten Websites ist es nicht der Hebel, für den es viele halten. Tatsächlich handelt es sich um zwei Faktoren, die zusammenwirken: Wie viel Googlebot kann Ihren Server zu crawlen, ohne ihn zu überlasten, und wie viel das möchte die Indizierung richtet sich danach, wie beliebt und wie aktuell Ihre Seiten sind.
Im Folgenden zeige ich Ihnen, wo Sie Ihre Crawling-Statistiken in der Search Console finden, wie Sie diese interpretieren und – was noch wichtiger ist – ob Sie sich überhaupt darum kümmern müssen; denn die ehrliche Antwort für eine normale WordPress-Website lautet in der Regel: “Nicht besonders.”
Wichtigste Erkenntnisse
- Das Crawl-Budget umfasst zwei Aspekte: zum einen, wie viel Googlebot crawlen kann (die Kapazität Ihres Servers), und zum anderen, wie viel er crawlen möchte (die Nachfrage aufgrund von Beliebtheit und Aktualität).
- Die meisten Websites müssen sich nicht darum kümmern; laut Google ist dies vor allem für sehr große oder sich schnell ändernde Websites von Bedeutung.
- Sie finden diese Informationen unter „Einstellungen“ und anschließend unter „Crawl-Statistiken“ in der Search Console. Dort werden die Gesamtzahl der Anfragen, die durchschnittliche Antwortzeit und der Host-Status der letzten 90 Tage angezeigt.
- Der eigentliche Gewinn besteht nicht darin, nach “mehr” Crawl-Budget zu streben, sondern darin, Google davon abzuhalten, dieses für wertlose URLs, Soft-404-Fehler und Weiterleitungsketten zu verschwenden.
- Bei einer normalen WordPress-Website decken ein schnelles Hosting, eine übersichtliche Sitemap und keine endlosen URL-Strukturen fast alles ab, worauf es ankommt.
Was das Crawl-Budget eigentlich ist
Am einfachsten lässt sich dies – und so stellt es auch Google selbst dar – als Kombination zweier Grenzen verstehen. Die erste ist Ihre Grenzwert für die Crawl-Kapazität: Wie viele Verbindungen Googlebot zu Ihrer Website herstellen kann, bevor die Gefahr besteht, dass Ihr Server verlangsamt wird – weshalb ein schneller, leistungsfähiger Host häufiger gecrawlt wird als ein träger.
Der zweite ist Crawl-Nachfrage: Wie sehr Google Ihre Seiten tatsächlich haben will, was von deren Beliebtheit und der Häufigkeit ihrer Aktualisierungen abhängt. Eine Seite, auf die niemand verlinkt und die nie aktualisiert wird, erzielt einfach keine vielen wiederkehrenden Besuche – ganz gleich, wie viel Serverkapazität dir zur Verfügung steht. Kombiniert man diese beiden Faktoren, erhält man das tatsächliche Crawl-Budget. Deshalb bringt der Ansatz “Kauf dir einfach einen größeren Server” bei einer Website, für die Google kaum Interesse hat, auch nichts.
Musst du dir darüber überhaupt Gedanken machen?
Hier kommt der Teil, den die meisten Beiträge zum Thema Crawl-Budget stillschweigend auslassen. Googles eigene Leitfaden zur Verwaltung des Crawl-Budgets richtet sich an große Websites, also solche mit Hunderttausenden von Seiten oder Rubriken, die sich täglich ändern. Wenn Sie einen Blog, einen kleinen Online-Shop oder eine Website für ein lokales Unternehmen betreiben, kann Googlebot mit ziemlicher Sicherheit alles, was Sie haben, problemlos crawlen.
So if your pages are slow to get indexed, crawl budget is rarely the culprit; weak internal linking, thin content, or a noindex left in by accident usually is. I am not saying ignore the report, because it is genuinely useful for spotting server trouble, but I would not lose sleep over “optimizing” a budget that is already more than enough for your page count.
So finden Sie Ihre Crawling-Statistiken in der Search Console
Melden Sie sich zunächst bei Google Suchkonsole und vergewissern Sie sich, dass die gewünschte Website verifiziert ist. Die Crawling-Daten sind an einer Stelle versteckt, an der man normalerweise kaum hinschaut, daher ist der Pfad entscheidend.
Scrollen Sie zum Ende des Menüs auf der linken Seite und klicken Sie auf Einstellungen, dann öffnen Sie die Crawl-Statistiken Abschnitt. Dieser Bericht umfasst die letzten 90 Tage und ist die einzige direkt von Google bereitgestellte Übersicht darüber, wie die Bots des Unternehmens Ihre Website tatsächlich besuchen.
So lesen Sie den Bericht „Crawl-Statistiken“
Sobald die Seite geladen ist, geben Ihnen ein paar Zahlen schon fast alle wichtigen Informationen. Gesamtzahl der Crawling-Anfragen gibt an, wie oft Googlebot etwas abgerufen hat; durchschnittliche Reaktionszeit wie schnell Ihr Server geantwortet hat, was wiederum direkt mit dieser Kapazitätsgrenze zusammenhängt; und Host-Status Gibt an, ob bei Google beim Crawling Probleme mit der Erreichbarkeit aufgetreten sind.
Der Teil, der Ihre Aufmerksamkeit verdient, ist der Aufschlüsselung der Anfragen, das die Crawls nach Antwortstatus (200er, 301er, 404er, Serverfehler), nach Dateityp und nach Googlebot-Typ aufschlüsselt. Wenn Sie feststellen, dass die Antwortzeiten steigen oder eine Flut von 404-Fehlern und Weiterleitungen auftritt, zeigt Ihnen Google damit an, wo seine Bemühungen ins Leere laufen – und diese Informationen sind weitaus besser umsetzbar als die Gesamtzahl. Googles Dokumentation zu Crawl-Statistiken Dort werden alle Kategorien im Detail aufgeführt, falls Sie die vollständige Übersicht benötigen.
Wo das Crawl-Budget tatsächlich verloren geht
Wenn das Crawl-Budget tatsächlich ein Problem darstellt, liegt das fast immer daran, dass Google es für URLs verschwendet, die niemals crawlbar hätten sein dürfen. Zu den üblichen Übeltätern zählen die facettierte Navigation und Filterparameter, die nahezu unendlich viele Kombinationen erzeugen, Sitzungs-IDs in URLs, „Soft-404s“, die auf einer leeren Seite einen 200-Status zurückgeben, sowie lange Weiterleitungsketten die dazu führen, dass Googlebot drei Schritte benötigt, um eine Seite zu erreichen.
Doppelte Inhalte sind ein weiterer großer Ressourcenfresser, denn jede doppelte URL ist eine Seite, die Google crawlt, ohne dafür neue Informationen zu erhalten. Wenn Sie genau sehen möchten, welche Bots wo Zeit verbringen, können Sie Ihre Rohdaten Serverprotokolle are the only fully honest record; Search Console summarizes, but the logs show every request.
Was kann man dagegen tun?
Die Korrekturen ergeben sich direkt aus den Fehlern, und hinter jeder einzelnen steckt ein Grund – es handelt sich nicht einfach nur um Punkte, die abgehakt werden müssen. Blockieren Sie die unendlichen Seiten (facettierte URLs, interne Suchergebnisse, überflüssige Parameter) in der robots.txt, damit Googlebot nicht mehr dorthin gelangt, und beseitigen Sie Soft-404-Fehler und defekte Links, damit die Anfragen bei Googlebot auf echten Seiten landen und nicht in Sackgassen.
Keep your XML sitemap clean and current, listing only the canonical URLs you actually want indexed, because the sitemap is one of the strongest hints Google uses to prioritize. I have watched sites lose almost all their traffic except the home page because a plugin quietly broke the sitemap and nobody checked for weeks, so if you notice anything off there, treat it seriously; the Leitfaden zu Sitemap-Fehlern deckt die gängigsten ab. Achten Sie dann darauf, dass Ihr Hosting schnell ist, da eine schnellere Reaktionszeit sich direkt positiv auf die Kapazitätsseite des Budgets auswirkt.
Sollten Sie also das Crawl-Budget im Auge behalten?
Meiner Meinung nach lautet die Antwort für die große Mehrheit der Websites ganz gelassen: “Schau es dir an, aber mach dir keine allzu großen Gedanken darüber.” Öffne ab und zu den Crawl-Statistik-Bericht, um Serverprobleme und 404-Spitzen frühzeitig zu erkennen, aber wenn du ein paar hundert oder ein paar tausend Seiten hast, ist dein Budget mit ziemlicher Sicherheit ausreichend, und deine Energie solltest du lieber in Inhalte und interne Verlinkungen stecken.
Das Crawl-Budget wird erst dann wirklich wichtig, wenn Sie in den Bereich großer Websites vordringen oder wenn facettierte Navigation und Parameter URLs schneller generieren, als Google mithalten kann. Bis dahin erledigen schnelles Hosting, eine übersichtliche Sitemap und der Verzicht auf unendlich lange URL-Strings fast alles im Hintergrund – was eine weitaus bessere Nutzung Ihrer Zeit darstellt, als eine Zahl zu optimieren, die Sie ohnehin nie behindert hat.
Änderungsprotokolle
29. Juni 2026
- Der Leitfaden wurde überarbeitet, um die Crawl-Kapazität von der Crawl-Nachfrage zu trennen. Es wurde eine klare Aussage dazu hinzugefügt, wann das Crawl-Budget tatsächlich eine Rolle spielt, und die Korrekturen wurden auf die Stellen konzentriert, an denen es wirklich zu Verlusten kommt (facettierte URLs, Soft-404-Fehler, Weiterleitungsketten).
Want our posts to show up more often on Google?
One step & Google will surface this site in your Top Stories.
