1. Crawling und Indexierung auseinanderhalten
Beim Crawling ruft eine Suchmaschine eine URL ab und folgt ihren Verbindungen. Indexierung bedeutet anschließend, dass der Inhalt verarbeitet und grundsätzlich für Suchergebnisse berücksichtigt wird. Eine erreichbare Seite ist daher nicht automatisch indexiert.
Robots-Regeln, Meta-Anweisungen, Statuscodes und Canonicals beeinflussen verschiedene Schritte. Sie sollten nicht gegeneinander eingesetzt werden.
- Interne Links machen wichtige Seiten auffindbar
- Status 200 signalisiert eine regulär verfügbare Seite
- Noindex schließt eine Seite bewusst vom Index aus
- Robots.txt steuert Abrufe, nicht zuverlässig die Entfernung aus dem Index
2. Canonicals gegen URL-Dubletten einsetzen
Filter, Sortierungen, Varianten und Trackingparameter können sehr ähnliche URLs erzeugen. Ein Canonical verweist auf die bevorzugte Hauptversion und bündelt Signale, ist für Suchmaschinen jedoch ein Hinweis und kein absoluter Befehl.
Interne Links, Sitemap und Weiterleitungen sollten dieselbe Haupt-URL verwenden. Widersprüchliche Signale erschweren die Auswahl.
3. Sitemaps und Statuscodes sauber pflegen
Eine XML-Sitemap enthält indexierbare kanonische URLs. Weitergeleitete, gesperrte oder nicht gefundene Seiten gehören nicht hinein. Das Änderungsdatum sollte nur echte inhaltliche Aktualisierungen widerspiegeln.
Dauerhaft verschobene Inhalte erhalten eine 301-Weiterleitung auf eine fachlich passende Zielseite. Fehlerhafte Ketten und pauschale Weiterleitungen zur Startseite verschlechtern Orientierung und Diagnose.
4. Shop-spezifische Fallen kontrollieren
Onlineshops erzeugen durch Filter, Suche, Kollektionen und Varianten besonders viele URL-Kombinationen. Indexiert werden sollten vor allem Seiten mit eigenständigem Suchnutzen und ausreichendem Inhalt.
Ausverkaufte Produkte benötigen eine klare Strategie. Bei vorübergehender Nichtverfügbarkeit bleibt die Seite oft sinnvoll; dauerhaft entfernte Produkte werden je nach Ersatz, Nachfrage und Links weitergeleitet oder korrekt mit 404 beziehungsweise 410 beantwortet.
Kurz beantwortet
Häufige Fragen
Wie lange dauert eine neue Indexierung?
Das variiert von Stunden bis zu mehreren Wochen. Interne Links, Sitemap, Website-Qualität und Crawling-Häufigkeit beeinflussen die Geschwindigkeit.
Ist eine XML-Sitemap für kleine Websites notwendig?
Nicht zwingend, aber sie erleichtert Kontrolle und Auffindbarkeit. Eine klare interne Verlinkung bleibt trotzdem unverzichtbar.