Noindex: Wie die Direktive Seiten aus dem Index hält und wann sie wirkungslos bleibt
Noindex ist eine Suchmaschinen-Direktive per Meta-Tag oder X-Robots-Tag-Header, die eine Seite aus dem Suchindex hält. Sie wirkt nur, wenn der Crawler die Seite abrufen darf.
Eine Website kann jede URL technisch fehlerfrei ausliefern und soll trotzdem nicht überall in der Suche erscheinen. Testumgebungen, Warenkörbe, interne Suchergebnisse und doppelte Filter-Seiten bleiben für Nutzer erreichbar, ohne in den Suchergebnissen aufzutauchen. Noindex ist die Direktive für genau diesen Fall, und sie verliert ihre Wirkung, sobald eine robots.txt-Sperre den Crawler vorher abweist.
Was ist noindex?
Noindex ist eine Suchmaschinen-Direktive, die über ein Meta-Tag im HTML-Head oder einen X-Robots-Tag-HTTP-Header übermittelt wird. Sie weist Suchmaschinen an, eine Seite nicht in den Suchindex aufzunehmen. Google beschreibt den Mechanismus als Regelsatz mit einem <meta>-Tag oder einem HTTP-Antwortheader zur Steuerung der Indexierung (Google Search Central).
Die Direktive greift erst nach dem Crawling – Google muss die Seite abrufen, um die Anweisung im Quelltext oder im Header überhaupt zu lesen, und unterdrückt den Index-Eintrag erst danach. Eine robots.txt-Sperre unterbricht diese Kette schon vorher. Blockiert Disallow den Zugriff, sieht der Crawler die Seite nicht und die noindex-Anweisung darin ebenso wenig.
Im Quelltext steht das Meta-Tag im <head> des Dokuments:
<meta name="robots" content="noindex" />Serverseitig lässt sich derselbe Effekt über den HTTP-Header erzielen, etwa für PDF-Dokumente oder andere Nicht-HTML-Dateien ohne eigenen Head-Bereich:
X-Robots-Tag: noindexWie funktioniert noindex?
Ruft ein Crawler eine URL auf, prüft er zunächst die robots.txt der Domain, ob der Zugriff überhaupt erlaubt ist. Erst wenn diese Prüfung den Abruf zulässt, liest er den HTML-Head und die HTTP-Header der Antwort, einschließlich einer eventuell gesetzten noindex-Anweisung.
Findet der Crawler die Direktive, bleibt die Seite aus dem Suchindex. Einen bereits vorhandenen Eintrag entfernt die Suchmaschine wieder. Das Crawling selbst bleibt davon unberührt – die Seite wird weiterhin regelmäßig abgerufen und taucht in den organischen Suchergebnissen trotzdem nicht auf.
Konfigurator-Anwendungen im Industrie-Umfeld erzeugen für jede Bauteil-Kombination eine eigene URL. Die einzelnen Kombinationen tragen keine eigenständige Suchnachfrage, sollen aber für Nutzer funktionsfähig bleiben. Ein serverseitig gesetztes noindex hält diese Massen-URLs aus dem Index, ohne die Anwendung selbst zu sperren.
Was noindex nicht ist: eine robots.txt-Regel
Der noindex-Eintrag in der robots.txt hält sich als Praxis, obwohl er seit Jahren wirkungslos ist. Google hat diese undokumentierte Regel nie offiziell unterstützt und ihre Verarbeitung zum 1. September 2019 vollständig eingestellt (Google Search Central Blog).
Der zweite, verwandte Fehler besteht darin, robots.txt-Sperre und noindex gleichzeitig auf dieselbe URL anzuwenden. Blockiert Disallow den Zugriff, erreicht der Crawler die Seite nicht und liest die Anweisung im Quelltext folglich nie. Verweisen andere Stellen im Web auf diese URL, kann sie trotz Sperre als Eintrag ohne Snippet im Index stehen bleiben.
| Mechanismus | Steuert | Wirkung |
|---|---|---|
| Noindex (Meta-Tag / Header) | Aufnahme in den Suchindex | Bindende Anweisung für kooperierende Crawler, sobald die Seite erreichbar ist |
| robots.txt (Disallow) | Zugriff des Crawlers | Verhindert das Crawling, nicht zwingend die Indexierung |
| Canonical Tag | Bevorzugte URL bei Duplikaten | Hinweis, den Google bei widersprüchlichen Signalen übergehen kann |
| 404 / 410 | Existenz der Ressource | Entfernt eine Seite dauerhaft, sobald der Inhalt tatsächlich verschwunden ist |
Funktioniert noindex in der robots.txt?
Nein. Google verarbeitet nicht dokumentierte robots.txt-Regeln wie noindex seit dem 1. September 2019 nicht mehr. Für denselben Zweck stehen das Meta-Tag und der X-Robots-Tag-HTTP-Header zur Verfügung.
Noindex und SEO: Warum wichtig?
Noindex entscheidet mit, welcher Teil einer Domain überhaupt zur Bewertung durch die Suchmaschine ansteht.
- Indexierungs-Hygiene bei großen Beständen: Parameter- und Filter-Varianten ohne eigenen Suchwert lassen sich per noindex aus dem Index halten, während sie für Nutzer weiter funktionieren; unkontrolliert kosten sie sonst Crawl-Budget zulasten wichtigerer Seiten.
- Getrennte Zuständigkeiten: Seit der Abkündigung 2019 steuern das Meta-Tag und der HTTP-Header die Indexierung; die robots.txt regelt den Crawling-Zugriff.
- Relaunch-Risiko: Ein Website-Relaunch übernimmt Staging-Einstellungen häufig unverändert. Bleibt ein noindex aus der Testumgebung nach dem Go-Live bestehen, nimmt Google die neue Website aus dem Index.
- Grenze zum Canonical Tag: Ein Canonical Tag bündelt Duplikate über einen Hinweis, den Google übergehen kann. Noindex ist eine Anweisung ohne diesen Interpretationsspielraum und bündelt dafür keine Ranking-Signale.
- B2B-Relevanz mit Augenmaß: Bei Katalogen mit Filter-Navigation und Konfiguratoren ist noindex ein Standard-Werkzeug gegen Indexierungs-Inflation. Auf kompakten Unternehmenswebsites ohne Parameter-URLs bleibt der Anwendungsfall selten.
Steht in Ihrer Redirect- und Indexierungs-Checkliste vor dem nächsten Go-Live ein expliziter Prüfpunkt für Staging-noindex-Reste?
Noindex in der Praxis: Steuerung und Kontrolle
Staging-zu-Live: der häufigste Fehlerfall
Die neue Website entsteht in einer Staging-Umgebung, die für Suchmaschinen gesperrt sein muss, oft per pauschalem noindex auf der gesamten Testumgebung. Beim Go-Live wandert genau diese Einstellung unverändert mit auf die Produktiv-Domain und meldet Google, die neue Seite solle aus dem Index verschwinden. Ein vorab erstelltes URL-Inventar mit dem Prüfpunkt „noindex entfernt“ verhindert diesen Übertrag.
Noindex und follow kombinieren
Die Kombination noindex, follow signalisiert, eine Seite nicht zu indexieren, ihren internen Links aber weiter zu folgen. John Mueller von Google weist darauf hin, dass Google eine dauerhaft noindexierte Seite nach längerer Zeit praktisch wie noindex, nofollow behandelt. Eine nicht indexierte Seite gibt keine Linkkraft mehr zuverlässig weiter (SISTRIX: Noindex und Follow). Für einen dauerhaften Linkkraft-Erhalt eignen sich 301-Weiterleitung oder Canonical Tag deutlich besser.
Kontrolle in der Search Console
Der Bericht „Indexierung → Seiten“ zeigt den Status „URL als ‚noindex‘ markiert“ für jede betroffene URL. Er bestätigt eine bewusste Einstellung oder deckt einen Staging-Rest auf. Die URL-Prüfung ergänzt die Sicht auf Einzel-URLs und zeigt, wann Google die Seite zuletzt gecrawlt hat.
Fazit & Takeaways
- Erreichbarkeit vor Direktive prüfen: Kontrollieren Sie per URL-Prüfung der Search Console, ob Google die Seite abrufen darf, bevor Sie ihr ein noindex geben.
- robots.txt und noindex nie gemeinsam auf dieselbe URL: Die Sperre verhindert, dass der Crawler die Anweisung überhaupt liest.
- Staging-Reste vor jedem Go-Live prüfen: Ein URL-Inventar mit dem Prüfpunkt „noindex entfernt“ gehört in jede Relaunch-Checkliste.
Verwandte Begriffe
- Indexierung: Der übergeordnete Prozess, den noindex gezielt für einzelne Seiten unterbricht.
- robots.txt: Die Datei, die das Crawling steuert und mit noindex nicht auf derselben URL kombiniert werden sollte.
- Technisches SEO: Hier gehört die Indexierungs-Steuerung zum Standard-Umfang jedes Audits.
- Website-Relaunch: Beschreibt den Umzug, bei dem Staging-noindex-Reste am häufigsten unbemerkt live gehen.
- Rankings sichern beim Relaunch: Sichert die Indexierbarkeit der neuen Domain am Launch-Tag ab.
Zwei Prüfungen entscheiden über den Start. Die robots.txt muss den Abruf auf die wichtigsten URLs freigeben, und der Quelltext dieser Seiten darf kein noindex mehr tragen. Wer das am Launch-Tag verifiziert, findet einen Staging-Rest, bevor Google ihn liest.
Autor: Daniel Neubauer, Gründer und Geschäftsführer RED RAM MEDIA, Agentur- und SEO-Erfahrung seit 2010.
Häufige Fragen (FAQ)
Was ist noindex?
Noindex ist eine Suchmaschinen-Direktive, die per Meta-Tag im HTML-Head oder per X-Robots-Tag-HTTP-Header übermittelt wird. Sie weist Suchmaschinen an, eine Seite nicht in den Suchindex aufzunehmen, ohne das Crawling selbst zu verhindern.
Wie wird noindex technisch umgesetzt?
Für einzelne HTML-Seiten steht im Head-Bereich das Meta-Tag <meta name="robots" content="noindex">. Für Nicht-HTML-Dateien wie PDFs oder für eine serverseitige Steuerung ohne Zugriff auf den Head-Bereich dient stattdessen der X-Robots-Tag-HTTP-Header mit dem Wert noindex.
Funktioniert noindex in der robots.txt?
Nein. Google hat die Verarbeitung nicht dokumentierter Regeln in der robots.txt wie noindex zum 1. September 2019 eingestellt. Ein noindex-Eintrag in der robots.txt hat seither keine Wirkung mehr auf die Indexierung.
Was bedeutet die Kombination „noindex, follow“?
Die Kombination signalisiert, eine Seite nicht zu indexieren, ihren Links aber weiter zu folgen. Nach längerer Zeit behandelt Google eine dauerhaft noindexierte Seite laut John Mueller praktisch wie „noindex, nofollow“, weil eine nicht indexierte Seite keine Linkkraft mehr zuverlässig weitergibt.
Wie lange dauert es, bis eine Seite mit noindex aus dem Index verschwindet?
Google muss die Seite zunächst erneut crawlen, um die Anweisung zu lesen. Je nach Bedeutung der Seite im Web kann dieser erneute Besuch laut Google mehrere Monate dauern.
Was bedeutet der Status „URL als ‚noindex‘ markiert“ in der Search Console?
Der Status im Bericht „Indexierung → Seiten“ zeigt, dass Google eine URL gefunden, aber wegen eines noindex-Signals nicht indexiert hat. Er bestätigt eine bewusste Einstellung oder deckt einen übersehenen Rest aus der Staging-Umgebung auf.
Theorie verstanden? So sieht die Praxis aus:
Weitere Begriffe aus dem Lexikon
Strukturierte Daten
Strukturierte Daten im technischen SEO: wie Schema.org-Markup Seiteninhalte klassifiziert, wofür Rich-Suchergebnisse eine Auszeichnung brauchen und weshalb Markup kein Ranking-Faktor ist.
XML-Sitemap
XML-Sitemap im technischen SEO: was die Datei Suchmaschinen über URLs meldet, welche Grenzwerte das Protokoll setzt, welche Angaben Google ignoriert und warum ein Eintrag die Indexierung nicht erzwingt.
Page Speed
Page Speed ist die Ladezeit einer Webseite. Sie beeinflusst Absprungrate, Conversions und als Tiebreaker auch das Google-Ranking. Definition, Schwellenwerte und Messung im Überblick.
Von der Definition zur konkreten Umsetzung.
Sie kennen jetzt das Konzept. Die Frage ist: Wie wird daraus ein messbarer Hebel für Ihr B2B-Marketing? In 30 Minuten analysieren wir, ob und wie dieser Ansatz zu Ihren Zielen passt.
30 Minuten · Datenbasiert · Klartext