Indexierung: Wie Google Seiten crawlt, bewertet und in den Suchindex aufnimmt

Eine Seite taucht nicht automatisch in der Google-Suche auf, nur weil sie online steht. Erst nach Crawl, Rendering und Qualitätsbewertung entscheidet Google, ob eine URL im Suchindex landet und damit überhaupt in Suchergebnissen erscheinen kann. Bei B2B-Websites mit großen Katalogen verläuft an genau dieser Grenze der Unterschied zwischen vorhandenem und auffindbarem Content.

Was ist Indexierung?

Indexierung bezeichnet die Aufnahme einer Seite in den Suchindex nach Crawl, Rendering und Qualitätsbewertung. Google prüft dabei Inhalt, Rendering-Ergebnis und weitere Qualitätssignale der zuvor gecrawlten Seite (Google zu den Search-Grundlagen). Gesammelt werden dabei unter anderem die Sprache der Seite und das Land, auf das sich ihr Inhalt bezieht, dazu ihre Nutzerfreundlichkeit. Erst nach dieser Bewertung entscheidet Google, ob die Seite im Google-Index gespeichert wird und damit in den Suchergebnissen erscheinen kann.

Google selbst hält fest: „Eine Seite gilt als von Google indexiert, wenn sie vom Google-Crawler (‚Googlebot‘) aufgerufen, auf Inhalt und Bedeutung hin analysiert und im Google-Index gespeichert wurde“. Die drei Schritte bauen aufeinander auf. Dass einer davon gelingt, sagt über den nächsten nichts aus.

Wie funktioniert Indexierung?

Bevor Google eine Seite indexieren kann, muss der Crawler sie erfolgreich abrufen. Während dieses Abrufs rendert Google die Seite und führt vorhandenen JavaScript-Code aus, ähnlich wie ein Browser. Erst danach beginnt die inhaltliche Bewertung.

Crawling ist die Voraussetzung der Indexierung, aber keine Garantie dafür. Die Qualitätsbewertung folgt nach dem Abruf und entscheidet über Aufnahme oder Ausschluss – ein technisch fehlerfreier Abruf sagt über ihr Ergebnis nichts.

In einem Katalog tragen zwei Kategorieseiten für benachbarte Produktlinien häufig weitgehend denselben Beschreibungstext. Beide werden zuverlässig gecrawlt. In den Index nimmt Google eine davon auf und stuft die zweite als Duplikat ein.

Was Indexierung nicht bedeutet: der Automatismus-Mythos

Zwischen Crawl und Index-Eintrag liegt eine Entscheidung, die Google selbst trifft. Wer eine URL crawlen lässt oder in die Sitemap einträgt, hat sie damit noch nicht in den Index gebracht. Google hält in der eigenen Dokumentation fest, dass die Indexierung nicht garantiert ist und nicht jede verarbeitete Seite den Index erreicht.

Der umgekehrte Fall ist ebenfalls dokumentiert. Eine durch die robots.txt gesperrte Seite kann trotz blockiertem Crawling als reiner URL-Eintrag im Index erscheinen, sobald andere Seiten auf sie verweisen. Zugriff auf den Inhalt braucht Google für diesen Eintrag nicht.

Reicht ein Sitemap-Eintrag für die Indexierung?

Ein Sitemap-Eintrag reicht für die Indexierung nicht aus. Die Sitemap unterstützt Google beim Entdecken einer URL (Google Search Central). Über die Aufnahme in den Index entscheiden Inhalt, Qualität und weitere Signale unabhängig davon.

Indexierung und SEO: Warum wichtig?

Indexierung ist die Voraussetzung für jede organische Sichtbarkeit.

• Sichtbarkeits-Voraussetzung: Ohne Aufnahme in den Index kann eine Seite in keinem Suchergebnis erscheinen, unabhängig von Content-Qualität oder Backlink-Profil.
• Bewertung vor Aufnahme: Google sammelt vor der Speicherung Signale zur Seite, darunter ihre Sprache und ihre Nutzerfreundlichkeit. Technische Erreichbarkeit allein genügt der Prüfung nicht.
• Kein Automatismus über Crawling oder Sitemap: Weder ein Crawl-Vorgang noch ein Sitemap-Eintrag erzwingen die Aufnahme. Die Entscheidung fällt nach der inhaltlichen Bewertung.
• Messbare Kenngröße statt Vermutung: Der Indexierungsbericht der Search Console zeigt, welcher Anteil der bekannten URLs tatsächlich im Index liegt. Damit wird aus einer Annahme über Sichtbarkeit eine Zahl.
• B2B-Relevanz mit Augenmaß: Kompakte Firmenwebsites mit wenigen hundert Seiten erreichen in der Regel eine unauffällig hohe Indexierungsquote. Relevant wird das Thema bei Katalogen und programmatisch erzeugten Seitenbeständen, wo Parameter-Varianten den Index aufblähen können.

Wie groß ist der Abstand zwischen den URLs in Ihrer Sitemap und den URLs, die der Indexierungsbericht als indexiert ausweist?

Indexierung in der Praxis: Status lesen, Ursachen einordnen

Die Diagnose beginnt im Indexierungsbericht der Search Console. Eine site:-Abfrage in der Google-Suche liefert vorab einen groben Überblick und ersetzt den Bericht nicht.

Den Indexierungsstatus in der Search Console lesen

Der Bericht „Seiten“ unter Indexierung in der Google Search Console listet für jede URL einen von mehreren möglichen Status. Das URL-Prüftool ergänzt ihn um die Möglichkeit, ein erneutes Crawling einzelner Adressen anzustoßen. Für nicht indexierte Seiten unterscheidet Google unter anderem diese Kategorien (Google-Hilfe zum Indexierungsbericht):

Die ersten beiden Zeilen trennen zwei Fehlerquellen, die im Gespräch regelmäßig zusammenfallen: eine ausstehende Aufnahme-Entscheidung und einen Abruf, der noch gar nicht stattgefunden hat.

Warum eine Seite trotz Crawling nicht indexiert wird

Google nennt als Gründe gegen eine Aufnahme unter anderem geringe Inhaltsqualität und Robots-meta-Regeln wie ein aktives noindex. Auch ein Design der Website, das die Indexierung erschwert, steht auf dieser Liste. Daneben verschiebt eine Duplikat-Einstufung die Aufnahme auf eine andere URL; eine blockierende robots.txt stoppt bereits den Abruf davor.

Ein Canonical Tag verschiebt die Aufnahme-Entscheidung ebenfalls auf eine andere URL, wenn mehrere Adressen denselben Inhalt liefern. Google konsolidiert die Signale dann auf der gewählten Version, statt beide Varianten separat zu indexieren.

Indexierungs-Inflation bei Parameter-URLs

Kataloge mit Filter- und Sortier-Navigation erzeugen oft deutlich mehr URLs, als eigenständige Produktseiten existieren. Bleiben diese Varianten ohne Canonical Tag oder noindex indexierbar, entsteht eine Indexierungs-Inflation. Sie entzieht dem Crawl-Budget der Domain Kapazität für die wichtigen Produktseiten.

Der HTTP-Statuscode einer solchen Variante bleibt dabei unauffällig – sie antwortet mit 200 und wirkt technisch einwandfrei. Sichtbar wird das Problem erst im Indexierungsbericht. Bei einem Relaunch oder beim Aufbau programmatisch erzeugter Seitenbestände gehört diese Prüfung von Anfang an zur Planung.

Fazit & Takeaways

• Den Abruf getrennt von der Aufnahme prüfen: Der Indexierungsbericht der Search Console trennt beide Ebenen für jede einzelne URL und zeigt, an welcher Stelle eine Seite hängen bleibt.
• Sitemap als Entdeckungshilfe einplanen: Sie meldet Google neue URLs an und ersetzt die Qualitätsprüfung nicht.
• Parameter-Varianten vor dem Skalieren regeln: Legen Sie per Canonical Tag oder noindex fest, welche Filter- und Sortier-URLs indexierbar bleiben, bevor der Katalog wächst.

Verwandte Begriffe

• Crawler: Das Programm, dessen Abruf jeder Indexierung vorausgeht.
• Crawl-Budget: Die Ressourcen-Grenze, die bestimmt, wie oft und wie viele Seiten überhaupt gecrawlt werden.
• Technisches SEO: Enthält die Indexierungs-Diagnose als festen Bestandteil jedes Audits.
• Programmatic SEO für B2B-Kataloge: Der Ratgeber zum skalierten Seitenaufbau, bei dem Indexierungs-Management von Anfang an mitgeplant wird.
• SEO für B2B-Sortimente: Dort werfen Parameter- und Filter-Varianten die Frage nach der Indexierungs-Menge überhaupt erst auf.

---

Zwischen „ist online“ und „ist auffindbar“ liegt eine Entscheidung, die im Indexierungsbericht der Search Console nachlesbar ist. Er zeigt für jede URL, ob sie im Index liegt und welche Kategorie eine fehlende Aufnahme erklärt.

Autor: Daniel Neubauer, Gründer und Geschäftsführer RED RAM MEDIA, Agentur- und SEO-Erfahrung seit 2010.

Häufige Fragen (FAQ)

Was ist Indexierung?

Indexierung bezeichnet die Aufnahme einer Seite in den Suchindex nach Crawl, Rendering und Qualitätsbewertung. Google prüft Inhalt und Bedeutung der zuvor gecrawlten Seite und entscheidet erst danach, ob sie im Google-Index gespeichert wird.

Garantiert Crawling automatisch die Indexierung?

Crawling ist die Voraussetzung der Indexierung, aber keine Garantie dafür. Der Abruf durch den Crawler liefert Google lediglich den Inhalt. Die Qualitätsbewertung findet danach statt und entscheidet über Aufnahme oder Ausschluss.

Garantiert ein Sitemap-Eintrag die Indexierung?

Ein Sitemap-Eintrag garantiert die Indexierung nicht. Er hilft Google beim Entdecken einer URL. Über die Aufnahme in den Index entscheiden danach Inhalt, Qualität und weitere Signale unabhängig vom Sitemap-Eintrag.

Kann eine durch robots.txt gesperrte Seite trotzdem indexiert werden?

Ja. Google kann eine URL auch ohne Zugriff auf ihren Inhalt indexieren, etwa wenn die robots.txt das Crawling blockiert, die Seite aber extern verlinkt ist. Sie erscheint dann als reiner URL-Eintrag ohne Snippet im Index.

Was heißt in der Search Console „gecrawlt, aber nicht indexiert“?

Der Status zeigt, dass Google die Seite abgerufen und noch nicht in den Index aufgenommen hat. Dahinter steht in der Regel eine laufende Qualitätsbewertung oder eine Duplicate-Content-Einstufung, keine technische Fehlermeldung.

Wie lange dauert es, bis eine Seite indexiert wird?

Die Dauer hängt unter anderem vom Crawling-Bedarf der Domain, der Qualität der Seite und ihrer Popularität ab. Der Indexierungsbericht der Search Console zeigt den tatsächlichen Status jeder einzelnen URL.