Indexierung einfach und verständlich erklärt – SEO Bedeutung

Indexierung ist der Prozess, bei dem eine Suchmaschine wie Google eine zuvor gecrawlte Webseite analysiert und in ihren Index aufnimmt, also in eine riesige, durchsuchbare Datenbank einsortiert. Erst eine indexierte Seite kann überhaupt in den Suchergebnissen erscheinen. Ein anschauliches Bild ist die Bibliothek: Das Crawling entspricht dem Einsammeln der Bücher, die Indexierung dem Katalogisieren, damit ein Besucher ein Buch später über den Katalog findet. Wichtig ist, dass Google nicht jede gecrawlte Seite auch indexiert.

Crawling ist der Vorgang, bei dem der Googlebot über Links neue oder geänderte Seiten entdeckt und deren Inhalt lädt. Indexierung ist der anschließende Schritt, bei dem Google den Inhalt analysiert und die Seite in seinen Index aufnimmt, damit sie in den Suchergebnissen erscheinen kann. Eine Seite kann also gecrawlt, aber nicht indexiert werden, etwa wenn sie ein noindex-Tag trägt oder als zu dünn eingestuft wird. Erst nach der Indexierung folgt das Ranking, bei dem sich die Position zu einer konkreten Suchanfrage entscheidet.

Nein. Die Datei robots.txt steuert nur das Crawling, also welche Bereiche eine Suchmaschine abrufen darf. Sie verhindert keine Indexierung. Eine per robots.txt gesperrte Seite kann trotzdem im Index landen, etwa wenn andere Seiten auf sie verlinken; Google zeigt sie dann ohne Inhaltsvorschau an. Wer eine Seite zuverlässig aus dem Index halten will, nutzt das noindex-Verzeichnis als Meta-Robots-Tag oder X-Robots-Tag. Dabei darf die Seite nicht gleichzeitig per robots.txt gesperrt sein, sonst kann Google das noindex gar nicht sehen.

Dafür verwendet man das noindex-Verzeichnis, entweder als Meta-Robots-Tag im HTML-Kopf der Seite oder als X-Robots-Tag im HTTP-Header. Entscheidend ist, dass die Seite crawlbar bleibt, damit Google die Anweisung überhaupt lesen kann. Eine zusätzliche Sperre derselben Seite in der robots.txt wäre kontraproduktiv, weil Google das noindex dann nicht sieht. Eine bereits indexierte Seite verschwindet nach dem Setzen von noindex beim nächsten Crawl aus dem Index; das kann einige Zeit dauern.

Häufige Gründe sind ein gesetztes noindex-Tag, eine Sperre in der robots.txt, durch die Google den Inhalt nicht sieht, doppelte Inhalte, die über das Canonical-Tag zusammengefasst werden, sowie der Status gecrawlt aber derzeit nicht indexiert, der meist auf zu dünnen oder wenig eigenständigen Inhalt hindeutet. Auch Serverfehler mit 5xx-Statuscodes, 404-Fehler und weiche 404 verhindern die Indexierung. Den genauen Grund zeigt der Bericht zur Seitenindexierung in der Google Search Console, ergänzt durch das URL-Prüftool.

Das kann von wenigen Tagen bis zu mehreren Wochen reichen. Neue Websites ohne etablierte Autorität benötigen oft ein bis zwei Wochen, während bekannte Seiten mit guter interner Verlinkung mitunter innerhalb weniger Tage indexiert werden. Beschleunigen lässt sich der Prozess durch das Einreichen einer XML-Sitemap und die Beantragung über das URL-Prüftool in der Google Search Console. Eine Garantie für eine bestimmte Frist gibt es jedoch nicht, da Google selbst entscheidet, ob und wann eine Seite aufgenommen wird.

Erzwingen lässt sich die Indexierung nicht, man kann sie nur unterstützen und beantragen. Über das URL-Prüftool in der Google Search Console lässt sich eine Indexierung anstoßen, ebenso hilft eine eingereichte XML-Sitemap beim Entdecken neuer Seiten. Eine gute interne Verlinkung und hochwertiger Inhalt erhöhen die Wahrscheinlichkeit zusätzlich. Letztlich entscheidet aber Google, ob eine Seite in den Index aufgenommen wird; eine technisch saubere Seite mit echtem Mehrwert hat dabei die besten Chancen.

Am zuverlässigsten ist die Google Search Console. Der Bericht zur Seitenindexierung, früher Index-Abdeckung genannt, zeigt, wie viele Seiten indexiert sind, welche nicht und aus welchem Grund. Mit dem URL-Prüftool lässt sich eine einzelne Adresse genau untersuchen. Die bekannte Site-Abfrage, bei der man site und die eigene Domain in die Google-Suche eingibt, liefert dagegen nur eine grobe Schätzung der indexierten Seiten und eignet sich nicht für eine genaue Bestandsaufnahme.

Nein, die Indexierung ist selektiv. Google crawlt deutlich mehr Seiten, als es am Ende in den Index aufnimmt. Seiten mit dünnem, doppeltem oder wenig hilfreichem Inhalt landen häufig im Status gecrawlt aber derzeit nicht indexiert. Das ist kein technischer Defekt, sondern eine Qualitätsentscheidung von Google. Für Website-Betreiber bedeutet das, dass es sinnvoller ist, wenige hochwertige Seiten anzubieten als viele dünne, die ohnehin kaum Chancen auf eine Aufnahme in den Index haben.

Mobile-First-Indexierung bedeutet, dass Google für die Indexierung und Bewertung einer Website überwiegend die mobile Version heranzieht. Google hat die Umstellung darauf Ende 2023 abgeschlossen. In der Praxis sollte die mobile Version einer Seite daher vollständig sein und denselben Inhalt enthalten wie die Desktop-Variante, da fehlende Inhalte auf Mobilgeräten zu Problemen bei der Indexierung führen können. Ein responsives, gut nutzbares Design ist deshalb wichtig, zumal ein großer Teil der Zugriffe ohnehin von mobilen Geräten kommt.

Es gibt keine feste Zahl. Entscheidend ist die Qualität: In den Index gehören vor allem Seiten, die einen echten Mehrwert bieten und zum Thema der Website passen. Dünne Seiten, interne Suchergebnisse, endlose Filter- und Parameter-Varianten oder fast leere Übersichtsseiten profitieren selten von einer Indexierung und können das Gesamtbild der Website sogar schwächen. Solche Seiten lässt man besser über noindex bewusst aus dem Index, während man die wertvollen, einzigartigen Inhalte für die Indexierung gut erreichbar hält.

Nein. Bezahlte Anzeigen wie Google Ads haben keinen direkten Einfluss auf die organische Indexierung. Ob eine Seite in den Index aufgenommen wird, hängt von technischer Erreichbarkeit, Crawlbarkeit und Inhaltsqualität ab, nicht davon, ob für die Domain Anzeigen geschaltet werden. Werbung kann zwar kurzfristig Besucher bringen, ersetzt aber keine saubere technische Basis und keinen hochwertigen Inhalt, die für die organische Indexierung und ein gutes Ranking nötig sind.