Indexierung

Indexierung bezeichnet den Prozess, mit dem eine Suchmaschine eine Webseite analysiert und in ihren Datenbestand, den Index, aufnimmt. Nur indexierte Seiten können in den Suchergebnissen erscheinen, weshalb die Aufnahme in den Suchindex die Grundvoraussetzung für jedes Ranking ist. Google durchläuft dabei drei Phasen: Crawling, Indexierung und Ausspielung der Ergebnisse. Beim Indexieren wertet Google Texte, Titel-Tags, Alt-Attribute, Bilder und Videos aus und speichert die gewonnenen Informationen in einer riesigen Datenbank.

Der Begriff Indexierung wird auch in Wirtschaft und Recht verwendet, etwa für die regelmäßige Anpassung von Preisen, Löhnen oder Steuern an einen Index. Dieser Eintrag behandelt ausschließlich die Indexierung im Sinne der Suchmaschinenoptimierung.

Was ist Indexierung?

Indexierung ist der Vorgang, bei dem eine Suchmaschine eine zuvor gecrawlte Webseite analysiert, verarbeitet und in ihren Index aufnimmt. Erst nach dieser Aufnahme kann eine Seite in den Suchergebnissen auftauchen, ohne Indexierung bleibt sie für die Suche unsichtbar.

Die Aufnahme entscheidet damit über die gesamte organische Reichweite einer Seite. Eine Adresse kann technisch einwandfrei sein und hochwertige Inhalte tragen, doch solange sie nicht im Index steht, kann sie nicht in den Suchergebnissen erscheinen. Indexierung ist die Eintrittskarte in die Suche, nicht die Garantie für eine gute Platzierung.

Was ist der Unterschied zwischen Indexierung und Indizierung?

Indexierung meint die Aufnahme einer Seite in den Suchindex, während Indizierung im deutschen Sprachraum oft das behördliche Auflisten jugendgefährdender Medien bezeichnet. In der Informatik werden beide Begriffe synonym für das Erstellen eines Index genutzt.

Im SEO-Kontext ist die Schreibweise Indexierung etabliert und eindeutig auf Suchmaschinen bezogen. Wer von indizierten Seiten spricht, meint in der Praxis fast immer dasselbe: Seiten, die Google in seinen Datenbestand aufgenommen hat.

Jede aufgenommene Seite landet dabei am selben Ort, einer einzigen riesigen Datenbank, deren Aufbau über Tempo und Genauigkeit jeder Suchanfrage entscheidet.

Was ist der Google-Index?

Der Google-Index ist die zentrale Datenbank, in der Google die analysierten Inhalte aller aufgenommenen Webseiten speichert. Google beschreibt ihn als große, auf tausenden Computern verteilte Datenbank, die Milliarden von Webseiten umfasst.

Technisch handelt es sich um einen invertierten Index. Statt pro Seite alle enthaltenen Wörter zu speichern, hält der Index für jedes Wort eine Liste aller Seiten bereit, auf denen es vorkommt. Diese Struktur erlaubt es Google, eine Suchanfrage in Sekundenbruchteilen mit passenden Dokumenten zu beantworten.

Der Index ist kein statischer Speicher, sondern verändert sich laufend. Mit dem Caffeine-System stellte Google bereits 2010 von periodischen Updates auf eine kontinuierliche Aktualisierung um, sodass neue Inhalte heute oft innerhalb von Stunden statt Tagen auftauchen.

In diesen Index gelangt eine Seite allerdings erst nach zwei getrennten Schritten, deren Verwechslung zu den häufigsten Fehlern im technischen SEO zählt.

Worin unterscheiden sich Crawling und Indexierung?

Crawling ist das Herunterladen einer Seite durch einen Suchmaschinen-Bot, Indexierung die anschließende Analyse und Speicherung dieser Seite im Index. Crawling findet eine Seite, Indexierung nimmt sie auf. Eine gecrawlte Seite ist deshalb nicht automatisch auch indexiert.

Den ersten Schritt übernimmt Googles Crawler, der Texte, Bilder und Videos einer Seite abruft. Erst danach beginnt die eigentliche Indexierung, in der Google die abgerufenen Daten auswertet und über die Aufnahme entscheidet. Die folgende Übersicht trennt beide Phasen:

Aspekt	Crawling	Indexierung
Aufgabe	Seite entdecken und herunterladen	Inhalt analysieren und speichern
Akteur	Googlebot	Googles Indexierungssystem
Ergebnis	Rohdaten der Seite	Eintrag im Google-Index
Voraussetzung für	die Indexierung	das Ranking

Crawling und Indexierung sind dabei nur zwei von drei Stationen, die eine Seite von der Entdeckung bis zur Anzeige als Suchtreffer durchläuft.

Wie läuft die Indexierung bei Google ab?

Die Verarbeitung läuft bei Google in drei aufeinanderfolgenden Phasen ab: Crawling, Indexierung und Ausspielung der Ergebnisse. In der mittleren Phase analysiert Google die Inhalte, bündelt Duplikate zu einer maßgeblichen Version und speichert die gesammelten Signale im Index.

Der Ablauf der eigentlichen Indexierungsphase gliedert sich in drei Aufgaben, die Google nacheinander abarbeitet:

• Inhalte analysieren: Google verarbeitet den Text sowie Schlüsselelemente wie das Title-Tag, Alt-Attribute, Bilder und Videos, um Thema und Aussage der Seite zu erfassen.
• Duplikate bündeln: Google gruppiert Seiten mit nahezu gleichem Inhalt und wählt die als maßgeblich ausgezeichnete Version als Repräsentanten der Gruppe, die übrigen gelten als Alternativen.
• Signale speichern: Google legt Informationen über die maßgebliche Seite und ihren Cluster im Index ab, die später in die Bewertung für das Ranking einfließen.

Entscheidend ist dabei eine Einschränkung, die Google ausdrücklich nennt: Die Indexierung ist nicht garantiert, nicht jede verarbeitete Seite landet auch im Index. Google sichert weder Crawling noch Aufnahme noch Ausspielung einer Seite verbindlich zu.

Weil Google die Aufnahme ausdrücklich nicht garantiert, reicht passives Abwarten nicht aus, Betreiber müssen den Prozess aktiv anstoßen.

Wie wird eine Seite bei Google indexiert?

Eine Seite wird indexiert, sobald Googlebot sie crawlt und Google sie als aufnahmewürdig bewertet. Beschleunigen lässt sich der Vorgang, indem Betreiber Google auf neue Adressen hinweisen und ihnen interne Bedeutung verleihen.

Drei Maßnahmen erhöhen die Wahrscheinlichkeit und das Tempo der Aufnahme spürbar:

• Sitemap einreichen: Eine XML-Datei mit allen relevanten URLs in der Search Console hochladen, damit Google die Seitenstruktur kennt und neue Adressen schneller findet.
• URL-Prüfung nutzen: In der Search Console eine einzelne Adresse prüfen und über die Funktion zur Indexierungsanforderung direkt zur Aufnahme anmelden.
• Intern verlinken: Neue Seiten aus bereits indexierten, starken Seiten heraus verlinken, damit Googlebot sie über die interne Struktur erreicht und als wichtig einstuft.

Keine dieser Maßnahmen erzwingt die Aufnahme, sie verbessern aber die Chancen erheblich. Hochwertige, eigenständige Inhalte bleiben die wichtigste Voraussetzung dafür, dass Google eine Seite dauerhaft im Index hält.

Keine dieser Maßnahmen meldet allerdings zurück, ob sie gewirkt hat, weshalb eine eigene Kontrolle des Index-Status unverzichtbar ist.

Wie prüfe ich, ob eine Seite indexiert ist?

Den Indexierungsstatus prüfst du am zuverlässigsten über die Search Console. Die URL-Prüfung zeigt für eine einzelne Adresse den genauen Status, der Seitenindexierungsbericht listet alle aufgenommenen und ausgeschlossenen URLs samt Grund.

Drei Methoden liefern unterschiedlich genaue Antworten auf die Frage, ob eine Seite im Index steht:

• Suchoperator site: Eine Suche nach site:domain.de/seite zeigt grob, ob eine Adresse bekannt ist, ist aber ungenau und nicht für exakte Zählungen geeignet.
• URL-Prüfung: Googles kostenloses Monitoring-Werkzeug meldet pro Adresse, ob sie indexiert ist, und nennt bei Problemen den konkreten Grund.
• Seitenindexierungsbericht: Die Sammelansicht in der Search Console gruppiert alle URLs nach Status und macht so systematische Indexierungsprobleme einer ganzen Website sichtbar.

Der Suchoperator eignet sich für eine schnelle Stichprobe, für belastbare Aussagen führt kein Weg an der Search Console vorbei, deren Indexberichte bis 2015 zur damaligen Webmaster-Zentrale gehörten. Nur sie zeigt den Status aus Googles eigener Sicht ohne Schätzungen.

Nicht jede Seite gehört in den Index, für manche ist die Aufnahme sogar schädlich, weshalb sich der Ausschluss ebenso gezielt steuern lässt wie die Aufnahme.

Wie verhindert man die Indexierung einer Seite?

Die Indexierung einer Seite verhinderst du mit der noindex-Regel, entweder als Meta-Tag im Seitenkopf oder als X-Robots-Tag im HTTP-Header. Sobald Googlebot die Anweisung beim Crawlen sieht, entfernt Google die Seite vollständig aus den Suchergebnissen, unabhängig davon, ob andere Seiten auf sie verlinken.

Im HTML-Kopf einer Seite sieht die Regel für alle Suchmaschinen so aus:

<meta name="robots" content="noindex">

Für Dateien ohne HTML-Kopf wie PDFs oder Bilder setzt man die Regel stattdessen im HTTP-Header:

X-Robots-Tag: noindex

Typische Anwendungsfälle sind Dankeseiten, interne Suchergebnisseiten, Druckversionen oder Inhalte aus einer Entwicklungsumgebung. Diese Seiten sollen erreichbar bleiben, aber nicht in der Suche auftauchen.

Warum darf eine noindex-Seite nicht per robots.txt gesperrt sein?

Eine noindex-Regel wirkt nur, wenn die Seite nicht gleichzeitig durch die robots.txt vom Crawling ausgeschlossen ist. Sperrt die Steuerdatei für den Crawler-Zugriff die Seite, kann Googlebot sie nicht abrufen und die noindex-Anweisung niemals lesen.

Die Folge ist tückisch: Die Seite kann trotz noindex weiter in den Suchergebnissen erscheinen, weil Google die Anweisung gar nicht zu Gesicht bekommt. robots.txt steuert also den Zugriff, noindex steuert die Aufnahme. Wer eine Seite sicher aus dem Index halten will, lässt sie crawlbar und setzt ausschließlich auf noindex.

Ein fehlender Index-Eintrag ist aber längst nicht immer gewollt, häufig steckt eine ungewollte technische Ursache dahinter.

Warum werden Seiten nicht indexiert?

Seiten werden nicht indexiert, wenn Google sie als Duplikat einstuft, sie eine noindex-Regel tragen, der Crawler sie nicht erreicht oder ihre Qualität nicht ausreicht. Google garantiert ausdrücklich nicht, jede gecrawlte Seite aufzunehmen.

Fünf Ursachen erklären die meisten fehlenden Index-Einträge in der Praxis:

• Duplikate: Google bündelt nahezu identische Inhalte und nimmt nur eine Version auf, die übrigen bleiben außen vor.
• noindex-Regel: Eine vergessene oder falsch gesetzte noindex-Anweisung hält die Seite bewusst aus dem Index.
• Crawling-Sperre: Eine Sperre in der robots.txt oder ein Serverfehler verhindert, dass Googlebot die Seite überhaupt abruft.
• Knappes Crawling-Kontingent: Bei großen Websites kann ein begrenztes Crawling-Kontingent dazu führen, dass Googlebot tiefe oder neue Seiten erst spät besucht.
• Geringe Qualität: Dünne, wenig eigenständige Inhalte stuft Google als nicht aufnahmewürdig ein und lässt sie außerhalb des Index.

Was bedeutet “Gecrawlt – zurzeit nicht indexiert”?

Der Status “Gecrawlt – zurzeit nicht indexiert” im Seitenindexierungsbericht bedeutet, dass Google die Seite abgerufen, aber bewusst nicht in den Index aufgenommen hat. Die Seite ist Google bekannt, erfüllt aber aktuell nicht die Kriterien für eine Aufnahme.

Häufige Ursachen sind dünner oder wenig eigenständiger Inhalt, Überschneidungen mit anderen Seiten oder eine zu schwache interne Verlinkung. Dieser Status ist das heutige Gegenstück zu Googles früherem Zweitbestand für minderwertige Seiten, den die Suche bis 2007 sichtbar auswies. Der Status ist nicht endgültig: Verbessert sich Qualität oder interne Anbindung der Seite, kann Google sie bei einem späteren Crawl doch noch aufnehmen.

Jede nicht indexierte Seite ist verlorene Sichtbarkeit, was die Indexierung zur Grundbedingung für jede weitere Maßnahme der Suchmaschinenoptimierung macht.

Warum ist Indexierung für SEO wichtig?

Indexierung ist die Grundvoraussetzung für SEO, weil nur indexierte Seiten ranken und Besucher über die Suche erreichen können. Jede Optimierung von Inhalten, Technik oder Backlinks bleibt wirkungslos, solange eine Seite nicht im Index steht.

Für die Praxis bedeutet das eine klare Reihenfolge: Zuerst muss die Indexierung der wichtigen Seiten sichergestellt sein, erst danach lohnt sich die Arbeit an Rankings. Eine regelmäßige Kontrolle des Seitenindexierungsberichts deckt auf, wenn relevante Seiten unbemerkt aus dem Index fallen oder neue Inhalte nicht aufgenommen werden.

Genauso wichtig ist die Steuerung in die andere Richtung. Wer unwichtige Seiten konsequent über noindex aus dem Index hält, lenkt Googles Aufmerksamkeit auf die Inhalte, die wirklich ranken sollen. Saubere Indexierung ist damit kein einmaliger Schritt, sondern eine dauerhafte Aufgabe im technischen SEO.