Der ultimative Leitfaden für XML-Sitemaps

Was ist eine Sitemap?

Ein Sitemap ist eine Möglichkeit, eine Website zu organisieren, während die URLs und Daten unter jedem Abschnitt identifiziert werden. Das XML-Dokument enthält Anweisungen für Suchmaschinen-Bots.

Also kann eine Sitemap als eine diagrammatische Darstellung definiert werden, die zeigt, wie Unterseiten unter den übergeordneten Gruppierungen angeordnet sind. Diese Art von Diagramm bildet eine Karte einer Website. Diese Karte ist eine XML-Datei, die es Suchmaschinenbots ermöglicht, eine Website zu indizieren. Sitemaps können auch als eine Demonstration des Navigationslayouts und der Organisation von Inhalten auf einer Website definiert werden.

Die Bedeutung hinter Sitemaps

Webseiten werden weiterhin größer und komplexer. Zum Beispiel hat eine Seite wie Amazon wahrscheinlich tausende von Seiten und vielleicht Millionen von Produkten. Wie einfach wäre es für Suchmaschinen-Bots, eine solche Webseite zu durchsuchen? Wie funktioniert SEO wirklich?

Vielleicht ist Amazon ein extremes Beispiel. Schauen wir uns stattdessen eine Geschäftswebsite an. Sie hat eine Startseite, die einen Überblick über das Geschäft, die Produkte oder Dienstleistungen, die es anbietet, Kontaktinformationen, Blog und vielleicht Informationen über das Team gibt. Jede dieser Komponenten wird auf separaten Seiten weiter erklärt und jede Seite hat wahrscheinlich kleinere Unterabschnitte.

Für einen Blog könnte es Ankertext geben, der zu anderen Bereichen der Website verlinkt, zusätzlich zu dem Inhalt, der bereits häufig aktualisiert wird—manchmal mehrmals am Tag für Nachrichtenseiten. Was ist, wenn Sie Links haben, die auf andere Websites oder Webseiten zeigen? Wie sieht es mit Diskussionsforen aus, in denen ein bestimmtes Thema Hunderte von Kommentaren und Links zu anderen Seiten bekommen kann?

Es versteht sich von selbst, dass Webseiten ziemlich komplex werden können. Suchmaschinen kamen an einen Punkt, an dem sie die komplexen Strukturen nicht mehr nachverfolgen konnten. Einige Seiten, insbesondere dynamische Seiten, wurden immer wieder übersehen.

Entgegen der landläufigen Meinung sind Sitemaps kein Werkzeug zur Suchmaschinenoptimierung; sie beeinflussen auch nicht das Ranking. Stattdessen zielen sie darauf ab, Suchmaschinen dabei zu helfen, genaue Rankings und Suchen durchzuführen.

Google entwickelte 2005 ein Sitemap-Protokoll, bekannt als das Sitemap 0.84 Protokoll, um dieses Problem zu lösen. Es handelt sich um ein XML-Protokoll, das unter einer Creative Commons Lizenz veröffentlicht wurde. Dies ermöglichte es anderen Suchmaschinen, es zu unterstützen. Website-Entwickler müssen daher nicht verschiedene Sitemap-Typen erstellen. Alles, was sie tun müssen, ist eine einzelne Datei zur Einreichung zu erstellen und diese zu aktualisieren, wenn Änderungen an der Website vorgenommen werden.

Warum sind Sitemaps wichtig?

Obwohl die Antwort auf diese Frage aus der obigen Diskussion über Sitemaps klar sein mag, hier sind ein paar spezifische Gründe, warum Sitemaps wichtig sind:

1. Helfen Sie Suchmaschinen-Bots dabei, alle Seiten einer Website zu indizieren.

Suchmaschinen-Bots haben zuvor dynamische Seiten übersehen. Das XML-Protokoll erlaubte es den Bots jedoch, URLs effizienter zu verfolgen. Dies liegt daran, dass die notwendigen Informationen auf einer einzigen Seite platziert sind. Da das XML auch eine Zusammenfassung darüber enthält, wie häufig eine Website aktualisiert wird und ein Protokoll darüber führt, wann Änderungen vorgenommen werden, wird es für die Bots einfacher, Webseiten und URLs zu durchsuchen. Die Daten, die die Suchmaschinen benötigen, sind alle an einem Ort zugänglich, daher wird weniger Zeit auf einer Website verbracht (denken Sie daran, Bots haben Millionen von Seiten zu durchsuchen).

Sitemaps ermöglichen es Suchmaschinen-Bots, sogar URLs zu crawlen, die durch den normalen Crawling-Prozess nicht entdeckt werden.

2. Einfachere Navigation

Wir haben früher erwähnt, dass Sitemaps ursprünglich für Benutzer gedacht waren. Wenn eine Sitemap für Benutzer konzipiert ist, handelt es sich normalerweise um eine Liste von Webseiten oder sogar um Webdesign-Planungstools mit einer hierarchischen Anordnung, die im HTML-Format erscheint. Die Sitemap kann alle Seiten Ihrer Website auflisten. Alle Aktualisierungen Ihrer Website müssen der Sitemap hinzugefügt werden (zum Beispiel neue Bilder, Videos, Seiten und jeglicher anderer Inhalt).

Wenn Sie eine Sitemap auf Ihrer Website haben, ist es für einen Besucher einfacher, eine bestimmte Seite oder ein bestimmtes Thema zu finden. Dies liegt daran, dass Sie Ihren Inhalt nach Thema oder Kategorie organisieren. Die Sitemap hilft Ihnen, Ihren Inhalt so zu organisieren, dass der Kerninhalt in der Nähe der Startseite für eine einfache Zugänglichkeit ist. Die Sitemap enthält Ankertext, der auf die wichtigsten Teile Ihrer Website verweist. Besucher können die Sitemap verwenden, um ein Thema zu finden, indem sie durch die Menüs navigieren oder die Website durchsuchen.

Ein HTML-Sitemap ist auch nützlich, um Ihren Besuchern zu zeigen, worum es auf Ihrer Website geht. Wenn Sie eine Reihe von Links auf Ihrem Sitemap haben, möchten Sie diese vielleicht auf mehrere Seiten aufteilen. Wenn Besucher leicht finden können, wonach sie suchen, verbringen sie mehr Zeit auf Ihrer Seite, beteiligen sich an mehr Sitzungen und besuchen vielleicht sogar viele Seiten pro Sitzung, wenn Sie gute Inhalte haben. Sie werden letztendlich auch wiederkehrende Besucher und Konversionen haben.

Vielleicht fragen Sie sich, warum Sie eine Sitemap benötigen, anstatt sich darauf zu konzentrieren, eine gute UX für Ihre Website-Besucher zu erstellen. Die Wahrheit ist, es ist schwierig, 100% UX zu erreichen. Von Zeit zu Zeit werden Benutzer beginnen, nach einer internen Seite zu suchen oder eine Anfrage neu zu tippen, oder sogar nach Navigationselementen suchen, um eine bestimmte Seite oder ein bestimmtes Thema zu finden—hier kommen Sitemaps ins Spiel.

3. Einfachere Webentwicklung

Wie wir zuvor besprochen haben, hat Google das Sitemap 0.84 Protokoll unter einer Creative Commons Lizenz entwickelt. Dies sollte andere Suchmaschinen ermutigen, das Protokoll zu übernehmen, wie Yahoo und Microsoft kurz darauf zugestimmt haben. Infolgedessen wurde die Sitemap auf Version 0.9 aktualisiert und die drei Wettbewerber haben gemeinsam eine Website gesponsert, um das Protokoll im Detail zu erklären. Siehe hier.

Was bedeutet das für Entwickler? Es bedeutet, dass das Protokoll von den wichtigsten Suchmaschinen erkannt wird, sodass Webentwickler nicht verschiedene Arten von Sitemaps für jede Suchmaschine erstellen müssen. Alles, was sie tun müssen, ist eine einzelne Datei zu erstellen und einzureichen, und sie dann zu aktualisieren, sobald Änderungen auf einer Website vorgenommen werden.

Im Laufe der Zeit wird die XML-Sitemap zum Standard für alle Webseitenentwicklungen; daher werden zusätzliche Seiten, Multimedia-Dateien oder Blogs einfacher zu einer Seite hinzuzufügen sein. Noch besser, alle Aktualisierungen einer Seite werden von allen drei Suchmaschinen gesehen, wodurch die Notwendigkeit entfällt, diese Informationen dreimal zu aktualisieren, um drei verschiedenen Suchmaschinen gerecht zu werden.

Ask.com hat auch begonnen, XML-Sitemaps zu unterstützen. Ein kürzliches Update des XML-Sitemap-Protokolls hat es Ask.com ermöglicht, Suchmaschinen den Standort einer Website-Sitemap durch Platzierung eines Eintrags in die robots.txt-Datei zu „sagen“.

Wann sollten Sie Sitemaps verwenden?

Normalerweise können Suchmaschinen-Crawler die meisten Teile der Website entdecken, wenn Webseiten richtig verlinkt sind. Wenn Sie jedoch eine Sitemap haben, wird das Crawlen einfacher und effizienter. Lassen Sie uns einige Fälle betrachten, in denen Sie Sitemaps benötigen:

• Wenn Ihre Website ziemlich groß ist - besteht die Möglichkeit, dass Suchmaschinen-Crawler Elemente Ihrer Website übersehen, insbesondere kürzlich aktualisierte Seiten oder neue Seiten.
• Wenn Ihre Website neu ist und nur wenige externe Links auf sie verweisen - Suchmaschinen-Bots durchsuchen das Web, indem sie Links von einer Seite zur anderen folgen. Wenn Ihre Website neu ist und keine Links hat, ist es möglich, dass Suchmaschinen Ihre Seiten überhaupt nicht durchsuchen.
• Wenn es ein großes Archiv von Inhaltsseiten gibt, die isoliert sind oder nicht ordnungsgemäß verlinkt sind - Sie müssen Seiten, die nicht natürlich miteinander verlinkt sind, auf einer Sitemap auflisten.
• Sie verwenden sitemaps-kompatible Anmerkungen (reichhaltige Medieninhalte oder Inhalte, die in Google News angezeigt werden) - Google kann die zusätzlichen Informationen aus den Sitemaps berücksichtigen und in den Suchergebnissen anzeigen.

Es ist wichtig zu beachten, dass nur weil Sie eine Sitemap haben, dies nicht bedeutet, dass alle aufgeführten Elemente tatsächlich gecrawlt und indexiert werden. Dennoch gibt es viele Vorteile einer Sitemap, über die wir bereits gesprochen haben.

Erstellen einer Sitemap

Lassen wir uns vor Beginn ein Bild einer Sitemap anschauen:

Es sieht ziemlich kompliziert aus, nicht wahr? Die gute Nachricht ist, dass Sie nicht wissen müssen, wie man programmiert, um eine Sitemap zu implementieren. Wir werden uns unten verschiedene Optionen zur Erstellung von Sitemaps ansehen:

Verwendung eines Content-Management-Systems

Wenn Sie ein Content-Management-System wie WordPress verwenden, können Sie Sitemaps automatisch mit Hilfe von Plugins wie Yoast SEO generieren.

Hinzufügen einer Sitemap zu WordPress

Wir werden uns darauf konzentrieren, wie man eine Sitemap zu WordPress über Yoast SEO hinzufügt. Wenn Sie dieses Plugin verwenden, wird der Sitemap-Index automatisch aktualisiert, wenn Sie Inhalte hinzufügen oder entfernen. Die Beitragstypen, die Sie indexiert haben möchten, sind ebenfalls enthalten. Beachten Sie, dass Beitragstypen, die als „noindex“ markiert sind, nicht in der Sitemap erscheinen werden.

Um Ihre Sitemap mit Yoast zu erstellen:

• Melden Sie sich bei Ihrem WordPress-Konto an und greifen Sie auf Ihr Dashboard zu.
• Klicken Sie im linken Menü auf „SEO“.

Die SEO-Einstellungen erweitern sich, um Ihnen mehr Optionen zu bieten.

• Wählen Sie „allgemein“.
• Klicken Sie auf Funktionen.
• Stellen Sie die „XML-Sitemaps“ um, um sie auf „ein“ zu schalten.
• Änderungen speichern.

Dies wird die XML-Sitemap aktivieren.

Anzeigen der Sitemap

• Melden Sie sich bei Ihrem WordPress-Konto an und greifen Sie auf das Dashboard zu.
• Klicken Sie im linken Menü auf „SEO“.

Die SEO-Einstellungen erweitern sich, um Ihnen mehr Optionen zu bieten.

• Klicken Sie auf „allgemein“ und wählen Sie dann die Registerkarte Funktionen aus.
• Um Ihre Sitemap anzusehen, klicken Sie auf das Fragezeichen, das neben dem Umschalter für XML-Sitemaps ist

Mit All in One SEO müssen Sie zu All in One SEO > Feature Manager gehen und die XML-Sitemaps aktivieren:

Die XML-Sitemap wird dann in den All in One SEO-Einstellungen erscheinen:

Je nach den Anforderungen Ihrer Website können Sie auf das Hilfe ? Symbol klicken, um mehr darüber zu erfahren, was Sie für jede Einstellung tun können. Wir empfehlen, das Häkchen für folgendes aktiviert zu lassen:

• Erstelle komprimierte Sitemap
• Link aus Virtual Robots.txt
• Dynamisch generierte Sitemap

Wo ist die Sitemap für Wix?

Wix-Websites verfügen über Sitemaps, die dynamisch auf ihrem Server generiert werden, und sie aktualisieren sich automatisch, wenn Seiten oder Inhalte zu Ihrer Website hinzugefügt oder von ihr entfernt werden. Diese Sitemaps sind nicht bearbeitbar.

Brauche ich eine Sitemap für Shopify zu erstellen?

Alle Shopify-Stores haben eine automatisch generierte sitemap.xml-Datei. Die Datei enthält Links zu allen Produkten, Seiten, Blogbeiträgen, Produktbildern und Kollektionen. Sie müssen Ihre Sitemap-Datei im Stammverzeichnis des primären Domainnamens Ihres Stores finden (zum Beispiel suescollection.com/sitemap.xml) und sie dann bei der Google Search Console einreichen. Wir werden uns diesen Prozess später im Artikel etwas genauer ansehen.

Verwendung anderer Tools zur Generierung einer Sitemap

Sie können Ihre aktuelle Sitemap mit unserem Sitemap-Validator-Tool überprüfen. Sie können sehen, ob Ihre Sitemap Fehler aufweist, um zu bestimmen, ob Sie eine neue erstellen müssen:

Um Ihnen beim Erstellen einer Sitemap zu helfen, hier sind einige Tools, die Sie verwenden können, einschließlich SEOptimer Sitemap Generator und XML-sitemaps.com. Lassen Sie uns anschauen, wie Sie beide verwenden können:

Verwenden von XML-sitemaps.com

• Gehen Sie zu https://www.xml-sitemaps.com/
• Kopieren Sie Ihre Website-URL
• Fügen Sie sie auf der Website ein
• Klicken Sie auf „starten“
• Warten Sie, während Ihre Website durchsucht wird. Hinweis: Wenn Ihre Website mehr als 500 URLs hat, müssen Sie ein kostenpflichtiges Konto erstellen.
• Nachdem der Crawler fertig ist, klicken Sie auf „Sitemap-Details anzeigen“ und laden Sie dann die .XML-Datei herunter

Zu diesem Zeitpunkt ist es hilfreich, Ihre Sitemaps zu überprüfen, da jedes Problem auf Ihrer Website zusammengefasst ist. Sie könnten beispielsweise auf ein Problem wie defekte Links stoßen. Lassen Sie uns dies ein wenig erkunden. Defekte Links können tatsächlich verhindern, dass Ihre Website vollständig indexiert wird, da Suchmaschinen sie als Sackgassen ansehen. Defekte Links deuten darauf hin, dass es keine weiteren Informationen gibt, während in Wirklichkeit die Informationen nur unzugänglich sind. Defekte Links können auch schädlich für den Ruf einer Website sein und Ihre Absprungraten erhöhen.

• Nachdem Sie Ihre Sitemaps auf Fehler überprüft haben, müssen Sie die Sitemap in den Stammordner Ihrer Website hochladen.
• Öffnen Sie anschließend die Google Search Console und fügen Sie Ihre Sitemap-URL hinzu.

Verwendung des SEOptimer Sitemap-Generators

• Um eine Sitemap zu generieren, müssen Sie Ihre Website eingeben:

• Ob Sie eine Sitemap ändern oder eine neue erstellen,
• Sie müssen möglicherweise auch Informationen hinzufügen, wie das Datum der letzten Änderung, die Häufigkeit, mit der Ihre Seiten voraussichtlich geändert werden, und die Priorität Ihrer URLs.
• Wählen Sie die Anzahl der Seiten aus, die Ihre Seite hat (bis zu 5.000)
• Klicken Sie auf den „Sitemap erstellen“-Button.

• Sie können sehen, dass der Crawler das Durchsuchen Ihrer Website abgeschlossen hat:

• Sie können entweder auf "Save XML file" klicken oder in die Zwischenablage kopieren und zu Ihrer aktuellen hinzufügen oder Ihre neu erstellte Sitemap-XML-Datei hochladen.

Sie müssen Ihre Sitemap mit dem SEOptimer Sitemap Validator validieren, nachdem Sie Ihre Sitemap auf Ihre Website hochgeladen haben. Anschließend müssen Sie Ihre Sitemap bei der Google Search Console einreichen. Es ist auch eine gute Idee, sie bei den Bing Webmaster Tools einzureichen. Schauen wir uns als Nächstes an, wie man beides macht:

Wie man eine Sitemap zur Google Search Console hinzufügt

Sie haben soeben Ihre Sitemap in Ihr Stammverzeichnis hochgeladen. Der Standort Ihrer Sitemap sollte https://mywebsite.com/sitemap.xml sein.

Um es in die Google Search Console hochzuladen, müssen Sie sich in die Search Console einloggen, zu „Index” gehen und dann „Sitemaps“ auswählen. Klicken Sie auf „Sitemap hinzufügen/testen“. Geben Sie die URL der Sitemap ein. Klicken Sie auf „Übermitteln“

Wie man eine Sitemap zu den Bing Webmaster Tools hinzufügt

Um Ihre Sitemap bei den Bing Webmaster Tools zu registrieren, bestätigen Sie, dass das Hochladen der XML-Sitemap auf Ihre Website erfolgreich war und dass die URL geladen wird.

• Melden Sie sich bei den Bing Webmaster Tools an
• Klicken Sie auf „Meine Seite konfigurieren“
• Klicken Sie auf „Sitemaps“

• Geben Sie Ihre Sitemap-URL in das Textfeld ein, das mit „Sitemap übermitteln“ beschriftet ist
• Klicken Sie auf „übermitteln“

Best Practices für die Erstellung einer Sitemap?

1. Testen Sie immer Ihre Sitemaps vor der Einreichung

Testen Sie immer Ihre Sitemap, bevor Sie sie einreichen, um sicherzustellen, dass alle Fehler behoben sind.

Hier ist, wie Sie Ihre Sitemap testen können:

• Klicken Sie auf der Berichts-Startseite in der Google Search Console auf „add/test sitemap“.
• Geben Sie die URL der Sitemap in das Dialogfeld ein und klicken Sie auf Test.
• Klicken Sie auf „Open Results“, sobald der Test abgeschlossen ist, um auf Fehler zu überprüfen.
• Danach können Sie einreichen.

2. Priorisieren Sie hochwertige Seiten in Ihrer Sitemap

Ihre Sitemap sollte Suchmaschinen-Bots nicht auf Seiten mit geringer Qualität verweisen, da dies als Zeichen einer Website mit minimalem Wert für Besucher angesehen werden könnte. Priorisieren Sie hoch optimierte Seiten, Bilder, Videos, einzigartigen Inhalt und andere Seiten, die zur Benutzerinteraktion auf Ihrer Sitemap anregen.

3. Ändern Sie die Änderungszeiten nur, wenn Sie wesentliche Änderungen vorgenommen haben

Eine Black-Hat-SEO-Technik besteht darin, Änderungszeiten zu manipulieren, um Suchmaschinen-Bots zu täuschen, indem man vorgibt, dass man seine Website wesentlich aktualisiert hat. Google kann deine Datumsstempel entfernen, wenn du das tust.

4. Verwenden Sie nur kanonische Versionen von URLs in Ihrer Sitemap

Wenn Sie das rel=canonical-Tag verwendet haben, um Seiten zu unterscheiden, die sich sehr ähneln, dann sollten Sie nur diese in Ihre Sitemap aufnehmen. Wenn Sie das Tag nicht verwendet haben, müssen Sie es verwenden, um ähnliche Seiten zu unterscheiden (z.B. Produktseiten) und künftig nur die kanonische Version in Ihrer Sitemap verwenden.

5. Halten Sie Ihre Sitemap-Datei klein

Wenn Ihre Sitemap klein ist, wird sie Ihren Server nicht belasten. Die Größe von Sitemaps wurde von Google und Bing auf 50 MB erhöht.

6. Verwenden Sie Robots.txt für Seiten, die Sie nicht indiziert haben möchten

Die Verwendung einer Sitemap bedeutet nicht, dass jede einzelne Seite indexiert werden muss. Seiten wie Dankesseiten sollten nicht indexiert werden, auch wenn sie in der Sitemap aufgeführt sind. Sie sollten den Meta-Robots-Tag „noindex, follow“ verwenden, um Ihre Link-Equity zu bewahren, auch wenn diese spezielle Seite nicht indexiert wird.

Es gibt Zeiten, in denen Sie robots.txt verwenden können, um Seiten zu blockieren. Ein solcher Fall ist, wenn Ihr Crawl-Budget schnell aufgebraucht wird. Was ist ein Crawl-Budget? Es ist die Anzahl der Male, die ein Suchmaschinenbot Ihre Website innerhalb eines bestimmten Zeitrahmens durchsucht. Wenn Ihre Website beispielsweise 32 Mal am Tag gecrawlt wird, besteht die Möglichkeit, dass Sie ein monatliches Crawl-Budget von 960 Mal haben.

Sie können Ihr Crawl-Budget unter „Crawl-Statistiken“ in der Search Console einsehen.

7. Wenn Sie mehr als 50.000 URLs haben, erstellen Sie mehrere Sitemaps

Eine Sitemap hat ein Limit von 50.000 URLs. Das ist ausreichend für die meisten Websites. Wenn Sie eine große Website haben, wie zum Beispiel E-Commerce-Websites, müssen Sie mehr als eine Sitemap erstellen.

8. Vermeiden Sie das Einbeziehen von „noindex“ URLs in Ihre Sitemap

Wenn Sie nicht möchten, dass bestimmte Seiten gecrawlt werden, ist es sinnvoller, sie nicht in die Sitemap aufzunehmen, anstatt ein „noindex“-Tag hinzuzufügen. Dieses Tag sendet widersprüchliche Informationen an den Suchmaschinenbot, was darauf hindeutet, dass die Seite sowohl indexiert werden soll als auch nicht. Diese Inkonsistenz verschwendet Ihr Crawl-Budget.

9. Wenn Sie eine große Website haben, erstellen Sie dynamische Sitemaps

Wenn Ihre Website ziemlich groß ist, müssen Sie einige Regeln festlegen, die bestimmen, wann eine Seite in Ihre Sitemap aufgenommen werden kann oder von „noindex“ zu „indexfollow“ geändert werden darf. Es kann hilfreich sein, ein Tool zu verwenden, um eine dynamische XML-Sitemap zu generieren.

10. Kombinieren Sie XML-Sitemaps und RSS/Atom-Feeds

RSS/Atom Feeds helfen dabei, Suchmaschinen zu benachrichtigen, wenn Inhalte auf Ihrer Website aktualisiert werden, und erleichtern es sowohl Suchmaschinen als auch Benutzern, auf frische Inhalte zuzugreifen.

11. Andere Tipps

• Stellen Sie sicher, dass der Aufbau Ihrer Website von links nach rechts verläuft, da die Menschen intuitiv von links nach rechts klicken.
• Verwenden Sie einfache Namen für Ihre Seiten, wie zum Beispiel „Produkte“ und „Dienstleistungen“.
• Ihr Menü muss auf jeder Seite erscheinen.
• Ihr Menü muss oben auf der Seite sein und die Hauptnavigationsseite auflisten.
• Verwenden Sie Unterkategorien, damit Ihr Menü einfach bleibt.

Zum Schluss

Sitemaps erleichtern es Suchmaschinen, Ihre Website zu indizieren und zu durchsuchen. Sie erleichtern auch Nutzern die Navigation auf Ihrer Website. Auf diese Weise werden sowohl Suchmaschinen als auch Nutzer das neue Material leicht finden, wenn Sie Inhalte aktualisieren. Was bedeutet das? Dass Sie wahrscheinlicher ein gutes Ranking und eine hohe Sichtbarkeitsreputation haben werden, was zu mehr und neuen Besuchern sowie Konversionen führt.