Ein E-Commerce-Website startet eine neue Produktlinie, veröffentlicht die Produktblätter, wartet einige Wochen und stellt fest, dass die Hälfte der Seiten immer noch nicht bei Google erscheint. Der übliche Reflex besteht darin, die Tags, die interne Verlinkung und die Ladegeschwindigkeit zu überprüfen. Oft wird die Sitemap-Datei vergessen, die jedoch das erste Dokument ist, das von den Crawling-Robots gelesen wird, bevor sie auch nur eine Seite durchblättern.
Sitemap und KI-Agenten: ein Risiko für fragmentierte Navigation
Die Wettbewerber sprechen viel über die klassische Indexierung durch Google oder Bing. Weniger wird darüber gesprochen, was auf der Seite der KI-Assistenten, der in Websites integrierten Chatbots oder der durch künstliche Intelligenz erweiterten Suchmaschinen passiert.
Wenn ein KI-Agent seine Antworten erstellt, stützt er sich teilweise auf die Sitemap, um zu bestimmen, welche Abschnitte einer Website existieren und dem Benutzer vorgeschlagen werden sollten. Eine URL, die in der Sitemap fehlt, wird möglicherweise niemals von einem Assistenten vorgeschlagen, selbst wenn die Seite über das Hauptmenü perfekt zugänglich ist. Man hat dann eine fragmentierte Navigation: Einige Rubriken werden in den von KI gespeisten Schnittstellen unsichtbar, während der Inhalt online ist.
Dieses Problem lässt sich nicht mit einem klassischen SEO-Audit erkennen. Man muss die Sitemap konsultieren, überprüfen, dass jede strategische Sektion darin enthalten ist, und sicherstellen, dass die aufgelisteten URLs kanonisch und indexierbar sind. Um konkret zu beobachten, wie eine Sitemap auf einer professionellen Website strukturiert ist, kann man die Sitemap-Seite von iqbusiness.fr durchblättern und die verwendete Gruppierungslogik notieren.
Sitemap nach Benutzerpfad segmentieren
Eine Sitemap, die alle URLs in einer Liste (Produktseiten, Kategorie-Filter, rechtliche Hinweise, Einstellungsseiten) auflistet, ertränkt nützliche Inhalte in technischem Rauschen. Die beste Praxis besteht darin, die Sitemap in nutzungsorientierte Gruppen zu unterteilen: Produkte, Hauptkategorien, Dokumentation, Hilfeseiten.
Konkret erstellt man mehrere Sitemap-Dateien, die in einem Sitemap-Index referenziert sind. Jede Datei entspricht einem bestimmten Typ von Benutzerpfad:
- Eine Sitemap, die den Produktblättern gewidmet ist, mit nur den kanonischen URLs der aktiven und auf Lager befindlichen Seiten
- Eine Sitemap für redaktionelle Inhalte (Leitfäden, Blogartikel, FAQs), die häufige Einstiegspunkte aus der Suche darstellen
- Eine Sitemap für Strukturseiten (Kategorien, Unterkategorien), wobei URLs, die durch Filter oder Sortierparameter generiert werden, ausgeschlossen werden
Diese Segmentierung hat einen direkten Einfluss auf die Navigation. Wenn man eine HTML-Sitemap aus diesen Dateien generiert, findet der Besucher eine lesbare Baumstruktur, die sich auf die für ihn interessanten Pfade konzentriert. Man vermeidet den endlosen Verzeichnis-Effekt, den niemand konsultiert.
Letzte Änderungsdatum: ein untergenutzter Frischeindikator
Jede URL in einer XML-Sitemap kann ein lastmod-Tag tragen, das das Datum der letzten Aktualisierung angibt. Auf dem Papier ist das ein technisches Detail. In der Praxis, wenn dieses Datum zuverlässig und tatsächlich mit den Inhaltsänderungen synchronisiert ist, verändert es die Situation.
Die Crawling-Robots priorisieren das Crawlen von Seiten, deren lastmod sich kürzlich geändert hat. Für eine Website, die regelmäßig Dokumentations- oder FAQ-Updates veröffentlicht, bedeutet das, dass frische Inhalte schneller im Index erscheinen.
Ein falsches lastmod hat den gegenteiligen Effekt: Wenn alle Seiten das heutige Datum anzeigen, während sich der Inhalt nicht geändert hat, ignorieren die Suchmaschinen diese Information schließlich. Man verliert dann den Vorteil der Priorisierung, und das Crawlen wird zufällig.
Auf der Benutzerseite ermöglicht eine HTML-Sitemap, die das letzte Änderungsdatum anzeigt, eine schnelle Identifizierung der kürzlich aktualisierten Rubriken. Für technische Dokumentationen oder eine Wissensdatenbank ist das eine echte Zeitersparnis.
Seine Sitemap überprüfen: konkrete Kontrollpunkte
Die Konsultation seiner Sitemap beschränkt sich nicht darauf, die XML-Datei in einem Browser zu öffnen. Man überprüft spezifische Elemente, die einen direkten Einfluss auf die Indexierung und damit auf das haben, was die Besucher über die Suche finden können.
- Alle aufgelisteten URLs müssen einen HTTP-Statuscode 200 zurückgeben. Eine URL mit einem Fehler 404 oder einer Weiterleitung 301 in der Sitemap sendet ein Signal schlechter Wartung an die Suchmaschinen
- Keine URL, die mit noindex gekennzeichnet ist, darf in der Sitemap erscheinen, da dies einen Widerspruch schafft, den die Robots als ein Problem der Gesamtqualität interpretieren
- Die URLs müssen den kanonischen Versionen entsprechen. Wenn eine Seite sowohl mit als auch ohne abschließenden Slash existiert, erscheint nur die kanonische Version in der Sitemap
- Die Datei darf die von den Suchmaschinen akzeptierte Größenobergrenze nicht überschreiten. Andernfalls muss man auf einen Sitemap-Index umsteigen, der auf mehrere Dateien verweist
Diese Überprüfungen dauern mit einem Crawling-Tool oder sogar manuell für eine kleine Website nur wenige Minuten. Oft entdeckt man Inkonsistenzen, die erklären, warum bestimmte Seiten in den Suchergebnissen nicht zu finden sind.
HTML-Sitemap für Besucher: ein ergänzendes Element, das die Navigation verändert
Die XML-Sitemap richtet sich an Robots. Die HTML-Sitemap richtet sich an Menschen. Auf großen Websites (E-Commerce, Inhaltsportale, institutionelle Websites) bietet eine gut gestaltete Sitemap-Seite eine Abkürzung zu jedem Abschnitt, ohne über das Menü oder die interne Suche gehen zu müssen.
Der Vorteil ist besonders deutlich, wenn die Architektur mehr als drei Ebenen tief ist. Ein Besucher, der nach einer Unterkategorie sucht, die in der Baumstruktur versteckt ist, findet sie schneller über eine strukturierte Sitemap als über eine Navigation mit Dropdown-Menüs.
Die Rückmeldungen variieren zu diesem Punkt je nach Art der Website. Für einen Blog mit zehn Seiten bringt die HTML-Sitemap nicht viel. Für einen Katalog mit mehreren Hundert Referenzen oder eine technische Dokumentationsdatenbank wird sie zu einem vollwertigen Navigationswerkzeug, vorausgesetzt, sie ist nach Nutzung segmentiert und wird regelmäßig aktualisiert.
Die Sitemap, ob XML oder HTML, ist keine Datei, die man einmal generiert und dann vergisst. Sie ist ein kontinuierliches Wartungswerkzeug, das den tatsächlichen Zustand der Website widerspiegelt. Jede Seite, die in der Sitemap fehlt, ist eine Seite, die die Robots und die Besucher möglicherweise niemals sehen werden.
