Suchmaschinen

Seiten lassen sich nicht crawlen oder melden HTTP-Fehler

Üblicher Schweregrad: hoch · Aufwand: mittel

Woran du es erkennst

Adressen aus dem Crawl waren nicht abrufbar (Zeitüberschreitungen, Verbindungsfehler) oder antworteten mit HTTP 4xx/5xx — interne Verweise führen ins Leere.

Warum es zählt

Jedes kaputte Crawl-Ziel verbraucht Crawl-Budget, leitet Verweiskraft in eine Sackgasse und frustriert Besuchende, die auf einen internen Verweis klicken. Anhaltende 5xx-Fehler veranlassen Suchmaschinen zusätzlich, die Crawl-Frequenz der gesamten Website zu drosseln.

So behebst du es

  1. Behebe oder entferne interne Verweise auf Fehler-Adressen; leite umgezogene Inhalte per 301 auf den aktuellen Ort, statt verlinkte 404er stehen zu lassen.
  2. Gehe 5xx-Antworten und Zeitüberschreitungen auf Serverebene nach (Fehlerprotokolle, Auslastung) — sie hängen oft mit Veröffentlichungen oder Lastspitzen zusammen.
  3. Crawle nach der Korrektur erneut und bestätige, dass die Fehlerzahl auf null sinkt; richte eine dauerhafte Überwachung der 4xx-/5xx-Quote ein.

Zum Nachlesen