Crawl-Budget

Crawl-Budget ist die Zahl der Seiten, die Google in einem bestimmten Zeitraum auf Ihrer Website abholt und verarbeitet. Es ergibt sich daraus, wie schnell Ihr Server antwortet und wie viel Wert Google in Ihrer Website sieht. Für kleine Websites ist das selten ein Problem, für große Websites bestimmt es mit, welche Seiten rechtzeitig in den Index kommen.

Wovon hängt Ihr Crawl-Budget ab?

Google verteilt seine Aufmerksamkeit über Milliarden Seiten und wählt deshalb, wo es Zeit investiert. Zwei Faktoren wirken: wie viel Ihr Server verkraftet (Crawl Rate) und wie gefragt Ihre Inhalte sind (Crawl Demand). Eine langsame Website oder viele wertlose URLs verschwenden Budget, das an Ihre wichtigen Seiten hätte gehen können.

• Schnelle, fehlerfreie Serverantworten
• Frische, regelmäßig aktualisierte Inhalte
• Wenig Duplicate Content und leere Parameter-URLs

Wie justieren Sie das?

Verschwenden Sie kein Budget auf Seiten, die nicht zählen. Blockieren Sie unnötige URLs über robots.txt, halten Sie Ihre Sitemap sauber und aktuell und sorgen Sie für logische Crawlability, damit Bots Ihre wertvollen Inhalte schnell finden. Eine flache Crawl-Tiefe hilft Google, auch Ihre tiefsten Seiten schneller zu erreichen und zu indexieren.

Warum das für Ergebnisse zählt

Wir richten den Blick auf Seiten, die Leads und Umsatz erzeugen, nicht auf einen aktuellen Index als Selbstzweck. Für die meisten B2B-Websites ist Crawl-Budget kein akutes Problem, für umfangreiche Kataloge oder viele Filterkombinationen sehr wohl.