Deindexing
Definition: Deindexing bezeichnet den vollständigen oder teilweisen Entzug eines Dokuments aus dem Suchindex einer Suchmaschine. Dadurch wird die URL aus den Suchergebnissen entfernt, obwohl die Seite technisch weiterhin erreichbar ist. Ursachen sind manuelle Maßnahmen, algorithmische Filter oder technische Fehler.
Definition und Mechanik: Was passiert beim Deindexing?
Stellen Sie sich den Suchindex als eine gigantische Bibliothek vor. Der Crawler ist der Bibliothekar, der neue Bücher (Webseiten) einsortiert. Beim Deindexing wird ein Buch zwar nicht verbrannt – die URL bleibt im Regal des Webservers stehen –, aber der Katalogzettel wird entfernt. Nutzer, die im Katalog (der Suchmaschine) suchen, finden das Werk schlicht nicht mehr.
Technisch betrachtet entfernt die Suchmaschine die URL aus ihrer invertierten Indexstruktur. Das Dokument wird bei der Ranking-Berechnung nicht mehr berücksichtigt. Der Unterschied zum Noindex-Tag ist entscheidend: Das Noindex-Attribut ist eine Anweisung an den Crawler, die Seite nicht zu indexieren. Deindexing hingegen ist die nachträgliche Entfernung einer bereits indexierten URL. Die Seite kann weiterhin gecrawlt werden, erscheint aber nicht in den Suchergebnissen.
Ursachen und Auslöser: Warum verschwinden Seiten?
Die Gründe für einen Index-Entzug lassen sich in drei Kategorien unterteilen:
| Kategorie | Beispiele | Reversibilität |
|---|---|---|
| Manuelle Maßnahmen | Spam-Richtlinien-Verstoß, Cloaking, gekaufte Links | Hoch, nach Überarbeitung und Reconsideration Request |
| Algorithmische Filter | Thin Content, Doorway Pages, automatisch generierter Text | Mittel, abhängig von der Qualitätsverbesserung |
| Technische Fehler | Fehlerhafte Robots.txt, falsche Canonical-Tags, 404-Statuscodes | Hoch, nach Behebung der Fehlerquelle |
Ein häufiges Missverständnis: Ein 404-Statuscode ist kein Deindexing. Die Seite wird gelöscht. Beim Deindexing existiert das Dokument weiterhin, nur der Indexeintrag fehlt.
Kontextuelle Abgrenzung: Deindexing in anderen Fachbereichen
Der Begriff Deindexing besitzt in angrenzenden Disziplinen eine abweichende Bedeutung. Im Finanzwesen bezeichnet Deindexing die Entkopplung von Vertragsklauseln von einem Inflationsindex – etwa bei der Neuverhandlung von Mietverträgen. In der Datenbanktechnologie beschreibt Deindexing das Entfernen eines Sekundärindex zur Beschleunigung von Schreiboperationen. Für die SEO-Praxis ist die Schnittstelle zum Content-Management relevant: Ein versehentliches Deindexing durch fehlerhafte HTTP-Header oder eine übersehene X-Robots-Tag-Direktive kann erhebliche Traffic-Verluste verursachen. Die operative Unterscheidung zwischen gewolltem (z. B. bei Duplicate Content) und ungewolltem Deindexing ist daher ein zentraler Bestandteil jeder Indexierungs-Strategie.
Diagnose und Recovery: Der Weg zurück in den Index
Die Identifikation eines Deindexing erfolgt über die Site:-Suche oder die Google Search Console. Fehlt die URL in den Ergebnissen, prüfen Sie zuerst den URL-Inspektor. Dieser zeigt an, ob die Seite gecrawlt wurde und ob eine Indexierung blockiert wurde.
Die Recovery-Strategie folgt einem klaren Schema:
- Ursachenanalyse: Prüfen Sie manuelle Maßnahmen im Search Console-Konto. Liegt keine vor, analysieren Sie die Seitenqualität kritisch.
- Content-Überarbeitung: Dünne Inhalte benötigen substanzielle Ergänzungen. Automatisch generierter Text muss durch redaktionell wertvollen Content ersetzt werden.
- Technische Korrekturen: Entfernen Sie fehlerhafte Noindex-Tags, korrigieren Sie Canonical-Verweise und bereinigen Sie die Robots.txt.
- Reindexierung anstoßen: Nutzen Sie die URL-Prüfung, um eine erneute Indexierung anzufordern. Bei manuellen Maßnahmen ist ein Reconsideration Request erforderlich.
Die Dauer der Recovery variiert erheblich. Algorithmische Filter benötigen oft mehrere Crawl-Zyklen, während technische Fehler nach der Korrektur innerhalb weniger Tage behoben sein können.
Prävention: Deindexing als Teil der Indexierungs-Governance
Proaktive Maßnahmen reduzieren das Risiko eines ungewollten Index-Entzugs. Ein regelmäßiges Monitoring der Indexabdeckung in der Search Console gehört ebenso dazu wie die Implementierung eines Change-Management-Prozesses für technische Anpassungen. Besonders kritisch sind Release-Prozesse: Ein versehentlich ausgerolltes Noindex-Tag in der Staging-Umgebung kann bei fehlerhafter Konfiguration die Produktionsseiten betreffen. Automatisierte Tests, die vor jedem Deployment die Robots-Meta-Tags validieren, verhindern diese Fehlerklasse zuverlässig.
« Back to Glossary Index