Indexierung.

Bei der Indexierung versucht Google laut eigener Doku zu verstehen, worum es auf einer Seite geht, und speichert Text, Bilder und Videos im Google-Index. Sie ist die zweite von drei Stufen: erst Crawling, dann Indexierung, dann die Ausgabe der Suchergebnisse. Für Unternehmen ist sie die Voraussetzung für jede Sichtbarkeit in der Suche. Eine Seite, die nicht im Index ist, erscheint weder in der klassischen Ergebnisliste noch als Quelle in den KI-Übersichten.

So funktioniert die Indexierung

Der Crawler ruft eine Seite ab, die Indexierung wertet sie aus. Dabei fasst Google laut eigener Doku ähnliche Seiten zu Gruppen zusammen und wählt die repräsentativste als kanonische Fassung aus. Die übrigen gelten als alternative Versionen. Mit dem Canonical-Tag könnt ihr dafür einen Vorschlag machen. Laut Google ist die Indexierung nicht garantiert, nicht jede verarbeitete Seite landet im Index.

Ausschließen könnt ihr eine Seite mit der Angabe „noindex", entweder als Meta-Tag im Kopf der Seite oder als HTTP-Header, der laut Google auch für PDFs und Bilder funktioniert. Damit Google die Angabe sieht, darf die Seite laut Google nicht per robots.txt gesperrt sein. Sonst kann sie trotzdem in den Ergebnissen auftauchen, wenn andere Seiten auf sie verlinken.

Worauf ihr im Unternehmen achten solltet

Schaut regelmäßig in den Bericht zur Seitenindexierung. Die Google Search Console zeigt dort, welche bekannten Adressen indexiert sind und aus welchem Grund andere fehlen, etwa weil Google eine Seite zwar gecrawlt, aber zurzeit nicht aufgenommen hat. Laut Google sind nicht indexierte Adressen nicht unbedingt ein Problem, alle wichtigen Seiten sollten aber im Index sein. Wie ihr den Bericht lest, zeigt unser Beitrag Google Search Console richtig nutzen.

Setzt noindex und eine robots.txt-Sperre nie gleichzeitig auf dieselbe Seite. Die Sperre verhindert, dass Google die noindex-Angabe überhaupt liest. Testumgebungen schützt ihr besser mit einem Passwort. In Projekten sehen wir oft, dass ein noindex aus der Testphase nach dem Go-live stehen bleibt oder umgekehrt eine offene Testumgebung im Index landet.

Plant Zeit ein, wenn ihr Seiten entfernt oder neu ordnet. Laut Google kann es je nach Bedeutung einer Seite Monate dauern, bis der Googlebot sie erneut besucht. Mit dem URL-Prüftool der Search Console könnt ihr einen neuen Crawl beantragen. Bei einem Relaunch mit neuen Adressen hilft unsere Weiterleitungstabelle, damit nichts verloren geht.

Häufige Fragen zur Indexierung

Was ist der Unterschied zwischen Crawling und Indexierung? Crawling ist das Abrufen, Indexierung das Auswerten und Speichern. Eine Seite kann gecrawlt sein, ohne dass Google sie in den Index aufnimmt.

Sollte jede Seite meiner Website im Index sein? Nein. Google schreibt selbst, dass ihr keine hundertprozentige Abdeckung erwarten solltet. Danke-Seiten, interne Suchergebnisse oder doppelte Varianten müssen nicht in den Index.

Sorgt eine Sitemap für die Indexierung? Sie hilft beim Finden. Laut Google garantiert eine Sitemap aber nicht, dass alle aufgeführten Seiten gecrawlt und indexiert werden.

Bei einem Website-Relaunch prüfen wir vor und nach dem Go-live, ob alle wichtigen Seiten im Index bleiben.