Eine Sitemap ist eine Datei, die die URLs einer Website auflistet und sie hierarchisch den Suchmaschinen-Robots präsentiert. Google, Bing und andere Crawler nutzen sie, um Seiten zu entdecken, aber auch um Metadaten zu jeder einzelnen Seite zu erhalten (Datum der letzten Änderung, Aktualisierungsfrequenz, relative Priorität).
Die Anwesenheit einer Sitemap garantiert nicht die Indizierung aller aufgelisteten Seiten: Es ist ein Entdeckungsignal, kein Befehl an die Suchmaschinen.
Das Feld lastmod in einer XML-Sitemap: ein technisches Detail, das oft schlecht genutzt wird
Die meisten Leitfäden zu Sitemaps konzentrieren sich auf die Erstellung der Datei und deren Einreichung. Ein Aspekt, der selten eingehend behandelt wird, betrifft das Feld <lastmod>, das das Datum der letzten Änderung einer URL angibt.
Google stellt klar, dass dieses Datum nur berücksichtigt wird, wenn es eine tatsächliche und signifikante Änderung der Seite widerspiegelt. Eine automatische nächtliche Regenerierung der Sitemap, ohne dass sich der Inhalt geändert hat, führt zu irreführenden Daten. Der Crawler ignoriert schließlich dieses Signal, was die Nützlichkeit der Datei verringert.
Damit eine XML-Sitemap zuverlässig bleibt, muss das lastmod-Datum einer tatsächlichen Änderung des Inhalts entsprechen. Wenn Sie ein CMS wie WordPress mit einem SEO-Plugin (Yoast, SEO Press, Rank Math) verwenden, stellen Sie sicher, dass die Regenerierung der Sitemap durch die Veröffentlichung oder Aktualisierung eines Artikels ausgelöst wird und nicht durch einen täglichen Cron-Job, der nichts mit dem Inhalt zu tun hat.
Dieser Punkt der Wachsamkeit gilt auch für E-Commerce-Websites, auf denen sich die Preise oder der Lagerbestand der Produktlisten häufig ändern. Das Aktualisieren des Datums nur, wenn sich der Beschreibungstext oder die Bilder ändern, sorgt dafür, dass ein konsistentes Signal für die Crawler erhalten bleibt. Auf der Sitemap-Seite von La Top Liste ist diese Logik der gezielten Aktualisierung sichtbar: Nur die geänderten URLs erscheinen mit einem aktuellen Datum.
XML-Sitemap und HTML-Sitemap: zwei Dateien für zwei unterschiedliche Zielgruppen
Eine XML-Sitemap richtet sich an Crawling-Robots. Sie ist in einem strukturierten Format geschrieben, das von Menschen nicht direkt eingesehen wird. Eine HTML-Sitemap hingegen ist eine Seite der Website, die für Besucher zugänglich ist und die Abschnitte und Artikel in Form von klickbaren Links auflistet.
Die XML-Sitemap hilft Suchmaschinen, Ihre Seiten zu entdecken, während die HTML-Sitemap die Navigation für verlorene Benutzer oder solche, die auf einer Seite ohne Ausweg gelandet sind, erleichtert. Beide erfüllen komplementäre Funktionen.
Wann die HTML-Sitemap relevant bleibt
Auf einer Website mit nur wenigen Dutzend Seiten kann eine HTML-Sitemap überflüssig erscheinen. Sie entfaltet jedoch ihren vollen Sinn auf umfangreichen Websites (redaktionelle Portale, Verzeichnisse, Kataloge), wo die interne Verlinkung nicht ausreicht, um alle Seiten innerhalb von drei Klicks von der Startseite aus zugänglich zu machen.
Eine gut gestaltete HTML-Sitemap fungiert als Sicherheitsnetz für verwaiste Seiten, also URLs, die keinen internen Link erhalten und die Crawler schwer zu finden sind. Wenn Ihre Struktur tiefe Abschnitte oder Kategorien enthält, die im Hauptmenü selten hervorgehoben werden, verbessert eine HTML-Seite, die diese URLs auflistet, deren Zugänglichkeit.
Struktur der XML-Datei: die Tags, die für die SEO wichtig sind
Das Sitemap-Protokoll definiert mehrere Tags. Nicht alle haben in der Praxis das gleiche Gewicht.
<loc>enthält die vollständige URL der Seite. Dies ist das einzige obligatorische Tag. Jede URL muss absolut sein (mit https:// beginnen) und genau der kanonischen Adresse der Seite entsprechen.<lastmod>gibt das Datum der letzten signifikanten Änderung an. Wie oben gesehen, muss es eine tatsächliche Änderung widerspiegeln, um von Google berücksichtigt zu werden.<changefreq>schlägt eine Aktualisierungsfrequenz vor (täglich, wöchentlich, monatlich). Google hat angegeben, dass es dieses Tag nicht berücksichtigt, was es weitgehend kosmetisch macht.<priority>weist einen relativen Prioritätswert zwischen den Seiten derselben Website zu. Auch hier ist ihr tatsächlicher Einfluss auf das Crawling begrenzt, wenn nicht sogar null auf der Google-Seite.
Nur die Tags loc und lastmod haben einen nachweisbaren Einfluss auf das Verhalten der Robots. Das sorgfältige Ausfüllen von changefreq und priority schadet nicht, bringt jedoch keinen messbaren Nutzen.
Erweiterungen für Bilder, Videos und Nachrichten
Google dokumentiert Erweiterungen des XML-Formats, um spezifische Inhalte zu kennzeichnen. Eine Sitemap kann Tags für Bilder (<image:image>), Videos (<video:video>) oder Nachrichtenartikel (<news:news>) enthalten.
Diese Erweiterungen liefern den Robots zusätzliche Informationen (Bildunterschrift, Videodauer, Veröffentlichungsdatum eines Artikels). Für eine Website, die regelmäßig multimediale Inhalte veröffentlicht, verbessern die Sitemap-Erweiterungen die Sichtbarkeit in Google Bilder und Google Videos.
Eine Sitemap einreichen und überwachen: über die Google Search Console hinaus
Die Einreichung einer Sitemap über die Google Search Console ist die am besten dokumentierte Methode. Sie geben die URL der Datei an (normalerweise votresite.com/sitemap.xml), und Google kümmert sich bei seinen nächsten Crawls darum.
Ein weniger bekanntes Detail: Bing bietet einen ergänzenden Kanal namens IndexNow an. Dieses Protokoll ermöglicht es, die teilnehmenden Suchmaschinen zu benachrichtigen, sobald eine URL hinzugefügt, geändert oder gelöscht wird, ohne darauf zu warten, dass der Crawler zurückkommt, um die Sitemap zu durchsuchen. IndexNow beschleunigt die Berücksichtigung von Änderungen für die unterstützenden Suchmaschinen (Bing, Yandex und andere).
Die Sitemap als Diagnosewerkzeug
Die Einreichung einer Sitemap dient nicht nur der Entdeckung. In den Bing Webmaster Tools sowie in der Google Search Console vergleicht der Abdeckungsbericht die über die Sitemap eingereichten URLs mit den tatsächlich indizierten URLs. Diese Diskrepanz offenbart konkrete Probleme:
- Seiten, die durch die Datei robots.txt blockiert sind, obwohl sie in der Sitemap aufgeführt sind
- URLs, die 404-Fehler oder Kettenweiterleitungen zurückgeben
- Seiten, die von der Suchmaschine als von geringer Qualität angesehen werden und trotz ihrer Anwesenheit in der Datei aus dem Index ausgeschlossen sind
Der Vergleich der eingereichten URLs mit den indizierten URLs ermöglicht es, problematische Seiten zu identifizieren, bevor sie die Sichtbarkeit der gesamten Website beeinträchtigen. Eine gut strukturierte Sitemap wird somit zu einem Überwachungsinstrument ebenso wie zu einem Entdeckungswerkzeug.
Eine Sitemap bleibt eine Hilfsdatei. Sie korrigiert weder eine fehlerhafte interne Verlinkung noch einen zu dünnen Inhalt, um indiziert zu werden. Ihre Rolle besteht darin, die Arbeit der Robots zu erleichtern und Ihnen einen klaren Kontrollpunkt über die Abdeckung Ihrer Website zu bieten. Sie aktuell zu halten, mit zuverlässigen Daten und sauberen kanonischen URLs, reicht aus, um das Beste daraus zu ziehen.
