Versteckt sich Ihre Website versehentlich vor Google?

Eine Website kann perfekt erreichbar sein, schnell laden und trotzdem praktisch unsichtbar für Suchmaschinen werden.

Dafür braucht es keinen spektakulären Ausfall. Ein übernommenes noindex, eine zu breite Regel in der robots.txt, ein Canonical auf die falsche Domain oder eine Sitemap voller Staging-URLs reichen aus. Nutzer mit direktem Link merken nichts. Das Problem zeigt sich erst später in sinkenden Impressionen, fehlenden Landingpages und der unangenehmen Frage: „Warum findet Google unsere neuen Seiten nicht?“

Der Unterschied zwischen erreichbar und auffindbar

Ein HTTP-Status 200 beweist nur, dass eine URL ausgeliefert wird. Für Sichtbarkeit müssen mehrere Signale zusammenpassen:

• Die Seite darf gecrawlt werden.
• Sie darf nicht per noindex ausgeschlossen sein.
• Canonical und Weiterleitungen müssen auf das richtige Ziel zeigen.
• Die URL sollte intern verlinkt und in der Sitemap sinnvoll vertreten sein.
• Sprach- und Umgebungsvarianten dürfen sich nicht widersprechen.

Google weist darauf hin, dass noindex nur erkannt werden kann, wenn der Crawler die Seite abrufen darf. Wer eine URL gleichzeitig in robots.txt sperrt und mit noindex versehen möchte, erzeugt damit kein zuverlässiges Ausschlusssignal, sondern eine schwerer nachvollziehbare Konfiguration.

Fünf typische Ursachen für unsichtbare Seiten

1. Staging-Einstellungen gelangen in Produktion

Testumgebungen werden häufig absichtlich mit noindex geschützt. Beim Deployment wird dann das Layout übernommen, aber die Robots-Metadaten bleiben bestehen.

2. Die robots.txt ist zu großzügig gesperrt

Eine Regel wie Disallow: / ist auf Staging sinnvoll und auf Produktion verheerend. Auch unpräzise Pfade können wichtige Bereiche wie Produkte, Kategorien oder Ressourcen blockieren.

3. Canonicals zeigen auf alte oder falsche Domains

Nach Domainwechseln, Mehrsprachigkeitsumbauten oder Preview-Deployments kann eine produktive Seite weiterhin eine andere URL als kanonisch ausweisen.

4. Die Sitemap enthält falsche Signale

Sitemaps mit Weiterleitungen, 404-Seiten, noindex-URLs oder Staging-Hosts helfen nicht bei der Orientierung. Sie dokumentieren Inkonsistenz.

5. Header und HTML widersprechen sich

Ein X-Robots-Tag kann auf Server- oder CDN-Ebene gesetzt werden, während der HTML-Code indexierbar aussieht. Wer nur den Seitenquelltext prüft, übersieht das Header-Signal.

Ein sinnvoller Sichtbarkeits-Check nach jedem Release

Prüfen Sie nicht nur die Startseite. Wählen Sie repräsentative URLs aus allen wichtigen Seitentypen:

• Startseite
• Leistungs- oder Produktseite
• Kategorie
• Artikel oder Insight
• Kontakt- oder Conversion-Seite
• Sprachversion
• neu veröffentlichte Seite

Für jede URL sollten Sie kontrollieren:

1. finaler Statuscode und Redirect-Ziel
2. robots.txt-Zugänglichkeit
3. Meta-Robots und X-Robots-Tag
4. Canonical
5. hreflang, falls mehrsprachig
6. Aufnahme in die korrekte Sitemap
7. interne Verlinkung
8. Hostname und Protokoll

Diese Prüfung lässt sich teilweise automatisieren. Entscheidend ist jedoch, dass die erwartete Indexierungsentscheidung pro Seitentyp festgelegt ist. Ohne Erwartungswert produziert ein Crawler nur Daten, aber keine belastbare Aussage.

Schnelltest für Website-Verantwortliche

• Ist klar, welche Bereiche indexiert werden sollen und welche nicht?
• Gibt es getrennte Regeln für Produktion und Staging?
• Wird die robots.txt nach Deployments automatisch geprüft?
• Werden noindex und X-Robots-Tag erfasst?
• Enthält die Sitemap ausschließlich kanonische, erreichbare URLs?
• Zeigen Canonicals auf die aktuelle Produktivdomain?
• Gibt es Alerts bei stark sinkenden indexierbaren Seiten oder Impressionen?
• Wird eine neue Seitenschablone vor Veröffentlichung getestet?

Mehrere Nein-Antworten bedeuten: Sichtbarkeit hängt derzeit stärker von Zufall als von einem kontrollierten Prozess ab.

Was Website-Pflichtencheck prüfen würde

Ein technischer Sichtbarkeits-Audit verbindet Crawl-Daten, Response-Header, Robots-Regeln, Canonicals, Sitemaps, interne Verlinkung und Sprachsignale. Wir prüfen nicht nur, ob einzelne Seiten indexierbar aussehen, sondern ob die Regeln über Seitentypen, Umgebungen und Domains konsistent sind.

Das ist besonders sinnvoll nach Relaunches, Domainwechseln, CMS-Migrationen, neuen Sprachversionen oder Änderungen an CDN und Hosting.

Eine Website, die niemand findet, ist nicht zuverlässig live. Wenn Indexierung nur dann geprüft wird, wenn der Traffic bereits fällt, kommt die Kontrolle zu spät. Ein kurzer Sichtbarkeits-Check nach Änderungen ist günstiger als Wochen verlorener organischer Reichweite.