Eine Sitemap ist eine Datei, meist im XML-Format, die die URLs einer Website auflistet, um sie an die Roboter der Suchmaschinen zu übermitteln. Ihre Hauptfunktion besteht darin, auf die Existenz von Seiten hinzuweisen, nicht deren Durchsuchung oder Indizierung zu erzwingen. Diese Unterscheidung verändert die Art und Weise, wie sie konzipiert und genutzt wird.
XML-Sitemap: Ein Entdeckungsignal, keine Garantie für die Indizierung
Google weist in seiner Dokumentation darauf hin: Eine Sitemap dient dazu, URLs anzugeben, aber sie erzwingt weder das Crawlen noch die Indizierung. Die Roboter entscheiden dann, basierend auf ihren eigenen Kriterien, welche Seiten es wert sind, erkundet und zum Index hinzugefügt zu werden.
Ebenfalls empfehlenswert : MSA: Welche Mindestfläche für landwirtschaftliche Flächen ist erforderlich, um 2024 Beiträge zu leisten?
Diese Nuance hat praktische Konsequenzen. Das Hinzufügen von Hunderten von Seiten mit Fehler 404, Weiterleitungen oder als noindex markierten Seiten in eine Sitemap bringt nichts Positives. Die aktuelle Best Practice besteht darin, nur kanonische, indexierbare URLs mit dem Status 200 aufzulisten.
Eine schlecht gefilterte Sitemap sendet Rauschen an die Roboter. Anstatt die Entdeckung Ihrer strategischen Inhalte zu beschleunigen, verwässert sie die Aufmerksamkeit des Crawlers auf unnötige Seiten. In der Praxis entspricht auf der Sitemap-Seite von Excargot jede aufgelistete URL einer tatsächlich zugänglichen Seite, was dieses Prinzip der vorherigen Filterung gut veranschaulicht.
Ergänzende Lektüre : Wie man mit Kopilote Motorradfahren übt, um die Prüfung zu bestehen
Crawl-Budget und tiefe Seiten: Wann die Sitemap wirklich nützlich wird
Für eine fünfseitige Schaufenster-Website, die durch ein Menü miteinander verbunden ist, bringt die Sitemap fast nichts. Die Roboter finden die internen Links selbst und durchsuchen alles in wenigen Sekunden.
Die Sitemap entfaltet ihren Wert in bestimmten Fällen:
- Große E-Commerce-Kataloge, in denen einige Produktseiten mehrere Klicks von der Startseite entfernt sind, ohne direkten Link aus der Hauptnavigation.
- Redaktionelle Archive oder technische Dokumentationen, in denen alte Inhalte im Laufe von Überarbeitungen allmählich ihre internen Links verlieren.
- Dynamisch generierte Inhalte (Seiten mit gefilterten Suchergebnissen, personalisierte Ergebnisseiten), die in keinem festen Menü erscheinen.
In diesen Situationen kompensiert die Sitemap die Lücken im internen Linkaufbau. Wenig intern verlinkte Seiten haben manchmal kein anderes Mittel, um von einem Roboter entdeckt zu werden. Die Sitemap bietet ihnen einen direkten Einstiegspunkt.
Es ist kein Komfortwerkzeug, sondern ein Sicherheitsnetz für Inhalte, die von der klassischen Navigationsstruktur nicht abgedeckt werden.
Eine Sitemap im Jahr 2025 einreichen: Das Ende des Pings und die Alternativen
Über Jahre konnten Webmaster Google über einen HTTP-Ping über eine Aktualisierung ihrer Sitemap informieren. Google hat diese Ping-Methode 2023 abgewertet. Die beiden empfohlenen Wege sind jetzt die Einreichung über die Google Search Console und die Deklaration der Sitemap-URL in der Datei robots.txt.
Die Deklaration in robots.txt ist die einfachste. Es genügt, eine Zeile vom Typ hinzuzufügen:
Sitemap: https://www.beispiel.com/sitemap.xml
Jeder Roboter, der die Datei robots.txt konsultiert (und die große Mehrheit tut dies zuerst), entdeckt automatisch den Standort der Sitemap. Keine manuelle Benachrichtigung erforderlich, kein Konto in einer Suchmaschinenkonsole nötig.
Die Google Search Console bleibt nützlich, um den Status der Verarbeitung der Sitemap zu überwachen: wie viele URLs eingereicht wurden, wie viele indiziert sind und vor allem, welche Fehler der Roboter beim Crawlen gefunden hat.
XML-Sitemap und HTML-Sitemap: Zwei Dateien, zwei unterschiedliche Funktionen
Die XML-Sitemap richtet sich an Roboter. Die HTML-Sitemap richtet sich an menschliche Besucher. Die Verwechslung der beiden führt zu ineffektiven Designentscheidungen.
Eine HTML-Sitemap ist eine Seite der Website, die über die Fußzeile oder das Menü zugänglich ist und die Struktur in Form einer Liste klickbarer Links präsentiert. Für Besucher, die eine bestimmte Seite suchen, ohne die interne Suchmaschine zu nutzen, bietet diese Seite einen Überblick über die Struktur der Website.
Die XML-Sitemap ersetzt kein gutes internes Linknetzwerk oder eine konsistente Website-Architektur. Eine Website, deren Navigation ausschließlich auf ihrer XML-Sitemap basiert, um ihre Seiten zugänglich zu machen, hat ein Strukturproblem, kein Sitemap-Problem.
Die beiden Formate ergänzen sich. XML hilft den Robotern, die Website zu kartieren. HTML hilft den Besuchern, sich zu orientieren, wenn die Hauptnavigation nicht ausreicht.
Die Sitemap filtern: Die auszuschließenden URLs
Alle URLs einer Website in der Sitemap aufzulisten, ist ein häufiger Fehler. Einige Seiten haben in dieser Datei keinen Platz:
- Seiten mit einem noindex-Tag oder einer kanonischen Anweisung, die auf eine andere URL verweist.
- Seiten, die durch ein Passwort geschützt oder für einen Mitgliederbereich reserviert sind.
- Seiten mit internen Suchergebnissen oder kombinatorischen Filtern, die Tausende von URLs ohne einzigartigen Inhalt generieren.
- URLs mit einer 301-Weiterleitung oder die einen 404-Fehler zurückgeben.
Eine saubere Sitemap enthält nur die Seiten, die die Website indiziert sehen möchte. Diese Disziplin der Filterung erleichtert die Arbeit der Roboter und verbessert die Lesbarkeit der Berichte in den Überwachungstools.
Auf großen Websites vereinfacht die Aufteilung in mehrere Sitemap-Dateien (eine pro Abschnitt, eine pro Inhaltsart) die Wartung und ermöglicht es, schnell zu identifizieren, welcher Teil der Website beim Crawlen Probleme verursacht.
Die Sitemap bleibt ein diskretes technisches Werkzeug, aber ihre Wirkung hängt vollständig von der Qualität dessen ab, was man hineinlegt. Eine gut gefilterte Datei, die in robots.txt deklariert und in der Search Console überwacht wird, deckt die gesamten Bedürfnisse für die Mehrheit der Websites ab.