Zum Inhalt springen

Wie Sie Rubriken und Inhalte einer Website schnell über die Sitemap finden

Man sucht eine bestimmte Seite auf einer Website, landet in einem endlos langen Menü, scrollt und gibt schließlich auf. Dabei gibt es eine Abkürzung …

Femme consultant le plan du site d'un site web sur un écran d'ordinateur dans un bureau à domicile organisé

Man sucht eine bestimmte Seite auf einer Website, stößt auf ein endlos langes Menü, scrollt und gibt schließlich auf. Dabei gibt es eine Abkürzung: Die Sitemap listet alle erreichbaren URLs in einer einzigen Datei auf. Wer weiß, wo sie zu finden ist und wie man sie liest, kann die Rubriken und Inhalte einer Website schnell erkunden.

Die Datei robots.txt: der erste Anlaufpunkt, um eine Sitemap zu finden

Bevor man wahllos URLs ausprobiert, öffnet man die Datei robots.txt der betreffenden Website. Dazu gibt man einfach die Domainadresse gefolgt von /robots.txt in die Adressleiste des Browsers ein. Diese für Crawler bestimmte Textdatei enthält häufig eine Zeile, die mit Sitemap: beginnt und die genaue URL der Sitemap angibt.

Diese Methode funktioniert bei den meisten professionellen Websites, da gängige CMS (WordPress, Shopify, Wix) diesen Eintrag automatisch generieren. Ist die Zeile vorhanden, kopiert man die URL, fügt sie in den Browser ein und gelangt direkt zur XML-Datei mit der Seitenliste.

Dieses Prinzip findet sich auch bei der Sitemap von Mister Tendance: Sie bündelt alle Rubriken in einer strukturierten Datei, die in wenigen Sekunden aufgerufen werden kann.

Wenn in der robots.txt keine Sitemap erwähnt wird, heißt das nicht unbedingt, dass keine vorhanden ist. Möglicherweise wurde sie lediglich nicht eingetragen – damit kommen wir zum zweiten Ansatz.

Mann analysiert an einem modernen Schreibtisch die Struktur einer Website-Sitemap auf einem Tablet

Übliche Pfade und Google-Suchoperatoren, um eine Sitemap zu finden

Die meisten Sitemaps sind unter vorhersehbaren Adressen zu finden. Zuerst probiert man domaine.fr/sitemap.xml, dann /sitemap_index.xml, /sitemap/ oder bei neueren WordPress-Websites auch /wp-sitemap.xml. Bei Shopify lautet der Standardpfad /sitemap.xml; bei Wix ist es häufig ebenfalls /sitemap.xml.

Wenn kein üblicher Pfad funktioniert

Dann kommt Google ins Spiel. Der Suchoperator site:domaine.fr filetype:xml liefert XML-Dateien, die von der Suchmaschine indexiert wurden. Zwar sind nicht alle Sitemaps indexiert, doch mit dieser Suchanfrage lassen sich die erfassten Dateien finden – darunter auch sekundäre Dateien, die Website-Administratoren manchmal übersehen.

Eine weitere Möglichkeit ist die Suche nach site:domaine.fr inurl:sitemap. Damit werden URLs gefunden, die das Wort „sitemap“ enthalten. Die Suche liefert auch HTML-Sitemap-Seiten und nicht nur XML-Dateien.

Eine XML-Sitemap lesen: Rubriken finden, ohne den Überblick zu verlieren

Öffnet man eine XML-Sitemap im Browser, erscheint eine Liste von URLs zwischen Tags. Die Struktur wirkt nüchtern, liefert aber konkrete Informationen, wenn man weiß, worauf man achten muss.

  • Sitemap-Indexdateien bündeln mehrere thematische Sitemaps (Artikel, Produkte, Kategorien). Jeder Link im Index führt zu einer Unterdatei, die einen bestimmten Bereich der Website abdeckt. So lässt sich die gesuchte Rubrik direkt ansteuern.
  • Das Tag <loc> gibt die URL jeder Seite an. Anhand dieser URLs lassen sich Kategorien, Unterverzeichnisse und die Organisationsstruktur der Website schnell erkennen.
  • Das Tag <lastmod> zeigt das Datum der letzten Änderung an. Verlässlich ist es nur, wenn der Webmaster es bei tatsächlichen inhaltlichen Änderungen aktualisiert – nicht bei jeder technischen Bereitstellung.

Die Tags <changefreq> und <priority> sind in manchen Dateien noch zu finden, aber Google gibt an, sie nicht zu verwenden, um zu entscheiden, welche Seiten zuerst gecrawlt werden. Man kann sie ignorieren, ohne wichtige Informationen zu verpassen.

HTML-Sitemap oder XML-Sitemap: zwei unterschiedliche Zwecke

Manche Websites bieten eine HTML-Sitemap an, die über die Fußzeile erreichbar ist. Diese Version richtet sich an menschliche Besucher: Sie zeigt die Rubriken als anklickbare Links an, die häufig nach Kategorien geordnet sind. Die XML-Sitemap hingegen richtet sich an Suchmaschinen und listet die URLs in Rohform auf.

Um Inhalte schnell zu durchsuchen, ist die HTML-Version übersichtlicher. Für eine vollständige Prüfung der Website-Struktur oder um festzustellen, ob eine Seite existiert, bleibt die XML-Datei maßgeblich.

Junge Frau sucht mithilfe der Sitemap auf dem Sofa zu Hause nach der Struktur einer Website

Eine Sitemap nutzen, um versteckte oder tief liegende Inhalte aufzurufen

Ein Navigationsmenü zeigt nur einen Bruchteil der Seiten einer Website. Tief liegende Seiten – etwa ältere Artikel, archivierte Produktseiten oder Tag-Seiten – tauchen oft in keinem Menü auf. Wenn der Webmaster die automatische Erstellung korrekt eingerichtet hat, sind sie in der Sitemap aufgeführt.

In der Praxis öffnet man die Unter-Sitemap für Artikel oder Produkte und nutzt dann die Suchfunktion des Browsers (Strg+F oder Cmd+F), um die Datei direkt nach einem Stichwort zu durchsuchen. Bei einer Sitemap mit mehreren Tausend URLs ist diese lokale Suche deutlich schneller als das Durchklicken einzelner Seiten.

Wichtige Einschränkungen

Eine Sitemap garantiert keine vollständige Übersicht. Seiten, die durch die robots.txt gesperrt oder nicht eingetragen sind, erscheinen darin nicht. Auch verwaiste Seiten ohne interne Links können fehlen, wenn sie nie manuell zur Datei hinzugefügt wurden.

Das Protokoll erlaubt bis zu 50.000 URLs pro Sitemap-Datei. Umfangreiche Websites teilen ihre Sitemap daher mithilfe eines Index in mehrere thematische Dateien auf. Diese Aufteilung erleichtert das Auffinden einzelner Bereiche – vorausgesetzt, man versteht die von der Website gewählte Benennungslogik (nach Veröffentlichungsdatum, Kategorie oder Inhaltstyp).

Methoden zum Auffinden einer Sitemap im Überblick

Methode Wann verwenden? Zuverlässigkeit
Datei robots.txt Erster Anlaufpunkt, funktioniert bei den meisten Websites Hoch, wenn die Sitemap dort eingetragen ist
Übliche Pfade (/sitemap.xml) Wenn in der robots.txt nichts erwähnt wird Gut bei gängigen CMS
Google-Suchoperatoren (site: filetype:xml) Wenn die üblichen Pfade nicht funktionieren Abhängig von der Indexierung
HTML-Sitemap (Fußzeile) Für eine schnelle Navigation als Besucher Abhängig von der Pflege der Website

Die Sitemap ist nach wie vor der direkteste Weg, um zu verstehen, wie eine Website ihre Inhalte organisiert. Wer zuerst die robots.txt prüft, dann die üblichen Pfade ausprobiert und anschließend Suchoperatoren verwendet, deckt fast alle Fälle ab. Ist die Datei erst einmal geöffnet, erledigt die Stichwortsuche im Browser den Rest.

Wie Sie Rubriken und Inhalte einer Website schnell über die Sitemap finden