Suchmaschinen

Eine wichtige Seite ist von der Suche ausgeschlossen

Üblicher Schweregrad: kritisch · Aufwand: minimal

Woran du es erkennst

Eine Seite, die gefunden werden soll, trägt eine Anweisung zum Nichtindexieren oder ist über robots.txt gesperrt — häufig ein Rest aus der Testumgebung.

Warum es zählt

Eine einzelne unbeabsichtigte Sperre kann eine Schlüsselseite oder einen ganzen Bereich still aus den Suchergebnissen nehmen, ohne dass irgendwo ein Fehler erscheint. Der Verkehr bricht weg, und es fällt erst auf, wenn jemand zufällig nachsieht.

So behebst du es

  1. Prüfe bei jeder wichtigen Seite die Antwortkopfzeilen und die Robots-Angabe auf eine unbeabsichtigte Sperre und die robots.txt auf zu weit gefasste Regeln.
  2. Prüfe die umgebungsabhängige Konfiguration, damit eine für die Testumgebung gedachte Komplettsperre nie in den Produktivbetrieb gelangt.
  3. Bestätige mit dem Prüfwerkzeug der Suchkonsole, dass die Seite tatsächlich indexierbar ist — nicht nur, dass sie im Browser erscheint.
  4. Nimm eine Prüfung bei der Auslieferung auf, die fehlschlägt, wenn die Produktivkonfiguration eine solche Sperre enthält.

Zum Nachlesen