In der globalen SEO-Szene sorgt eine Aussage von John Mueller von Google für Wirbel: Webmaster sollten alle paginierten Inhalte indexieren lassen, so lautet die vermeintliche Schlussfolgerung aus einer Antwort von Mueller in einer Google Webmaster Hangout-Session. Doch ich halte das für falsch: Nachdem Google seit 2019 dem rel=prev/next-Markup keine Bedeutung mehr schenkt, bedeutet die Aussage von Mueller keine Kehrtwende. Wie ihr auch ohne die Indexierung von Tausenden paginierten Kategorie-Unterseiten trotzdem alle wichtigen Produkt-Seiten in den Google-Index bekommt, zeige ich euch in diesem Blogpost.
Google schenkt rel=prev/next keine Beachtung mehr
Seit einiger Zeit ist bekannt, dass Google dem rel=next/prev-Attribut keine Beachtung mehr schenkt. Google selbst hatte erklärt, dass Seiten-Paginierungen, etwa für Kategorie-Unterseiten auf Blogs oder Online Shops häufig zu wenig werthaltigen Content hätten, um indexiert zu werden. Und die nicht-indexierten Seiten könnten dann als Soft 404 behandelt werden, was bedeutet, dass Links, die auf diesen Seiten platziert sind, keine Bedeutung mehr vom Crawler beigemessen wird. Das rel=prev/next-Markup hatte Google 2011 eingeführt; Websites konnten damit einzelne URLs als Teil eines größeren Sets von Seiten flaggen. Auf Anfrage erklärte dann John Mueller von Google im Jahr 2019 in einem Tweet recht nebenbei, dass der Konzern rel=next/prev seit einiger Zeit gar nicht mehr benutzen würde:
We noticed that we weren't using rel-next/prev in indexing for a number of years now, so we thought we might as well remove the docs :).
— ? John ? (@JohnMu) March 21, 2019
Wirbel in der SEO-Szene um Google-Aussage zur Indexierung von paginierten Inhalten
Doch seit Kurzem sorgt eine Aussage von John Mueller in der SEO-Szene für einen Hype, der meiner Meinung nach nicht korrekt ist. Grundlage ist ein Statement von ihm in einer Google Webmaster Hangout Session, die in einer verkürzten Aussage zu fragwürdigem Ruhm gelangte: Google will alle paginierten Seiten indexieren, so lautet die mutmaßliche Konklusion, die für globalen SEO-Wirbel sorgt. So formulierte etwa SEO Südwest zur vermeintlich geänderten Index-Empfehlung: “John Müller riet dazu, alle paginierten Inhalte indexieren zu lassen. So könne sichergestellt werden, dass alle Produkte und längere Inhalte von Google erfasst werden können”,
Allerdings ist diese Schlussfolgerung meiner Ansicht nach falsch. Schaut euch den Ausschnitt der Webmaster Hangout-Session am besten selbst an:
Auf die Frage (im Video bei 18:12 Minuten), ob alle paginierten Seiten indexiert werden sollten, antwortet John Mueller zwar mit einem “Ja” – und viele SEOs folgerten nun daraus, dass die paginierten Seiten nicht mehr mit einem “noindex,follow”-Attribut ausgestattet werden sollten, sondern mit einem “index,follow”. Allerdings ist das “Ja” von John Mueller nicht alles, was der Webmaster Trends Analyst von Google zu diesem Thema zu sagen hat. Er spricht im betreffenden Abschnitt nämlich über paginierte Seiten im Allgemeinen. Und bevor er zur Frage kommt, die er mit “Ja” beantwortet, holt er etwas weiter aus:
“So essentially when we talk about pagination, we mean you have one thing that is really large, and it doesn’t fit on one page, so you split it across multiple pages. And that could be maybe one long article where you say, well, it’s worthwhile splitting this. It could be a list of individual products, maybe in a category, where you say, well, I have 5,000 products, I can’t put them all on one page. We will put them on five pages, or 1,000 pages, or whatever. So that’s kind of where pagination comes in. And from our point of view, it’s important that we can recognize this kind of pagination and essentially index those individual pages, so that we can pick up all the content or all the links to individual items that you have on the paginated pages. Usually with pagination, one of the questions that comes up is, well this creates a lot of new URLs, because you have to go through all of these pages to get all of the content. And yes, it does generate a lot of URLs, and we have to index a lot of different pages. But if we ant that content in our index, if we want to understand those internal links to your other pieces of content, we kind of have to do that.” John Mueller, Google Webmaster Trends Analyst
Wenn es um paginierte Seiten geht, spricht John Mueller also sowohl von Content, der zum Beispiel so lang ist, dass er auf mehrere Seiten aufgeteilt wird, als auch von den Kategorie-Seiten einer E-Commerce-Website. Und dann, wenn er “Ja” zur Frage sagt, ob wirklich alle paginierten Seiten indexiert werden sollen, bezieht er sich – meiner Meinung nach – auf die Aufsplittung von langen Content-Stücken – und nicht auf paginierte Kategorie-Seiten, aber dazu gleich noch mehr.
Nur relevante (paginierte) Seiten sollten indexiert werden können
Denn nach seinem “Ja” führt Mueller weiter aus:
“Kind of like I mentioned before, if there is something on there that you want to have known by Google – which could be a link to a different product, which could be a part of a longer piece of content – then it has to be indexed.” John Mueller, Google Webmaster Trends Analyst
Diese Erklärung stellt für mich den Kern von John Muellers Aussage dar: Wenn ihr der Meinung seid, dass der Content oder die Links auf den paginierten Seiten derart relevant für Nutzer und Suchmaschinen sein, dann müssen diese Unterseiten auch indexierbar sein für Google.
Google benötigt die Link-Hierarchie, also die Klicktiefe einer Seite, um zu verstehen, wir wichtig ein bestimmtes Content-Element ist. Aber mal ehrlich: Wenn Content nur von einer paginierten Kategorie-Unterseite erreichbar ist und kein sonstiger Link auf diese Unterseite zeigt, kann diese nicht allzu wichtig sein.
Damit ist für mich klar: Unterseiten, die nur über den Paginierungslink selbst erreichbar sein, spielen für den Crawling-Prozess keine allzu große Rolle. Stattdessen sollte jedes wichtige Produkt einen Link von der indexierbaren Seite 1 erhalten. Ähnliche oder verwandte Produkte, die auf dieser Seite gelistet sind, sollten entsprechende Links von wichtigen Produktseiten erhalten. Aber ein Link von einer paginierten Kategorie-Unterseite 2, 3, 4 oder 5000 sagt nur aus, dass sie nicht allzu wichtig sind.
Wie Google trotzdem alle Produktseiten crawlen kann
Es ist also wenig sinnvoll, Google dazu zwingen zu wollen, alle unwichtigen paginierten Unterseiten einer Kategorie zu indexieren, wenn diese überdies gar nicht in den Index aufgenommen werden sollen. Schließlich soll im Regelfall nur die Seite 1 ranken. Trotzdem bleiben nun zwei Fragen offen, für die ich gern Vorschläge machen würde:
Frage 1: Wie können alle Produkt-Seiten, die auf den Kategorie-Paginierungen verlinkt sind, dennoch von Google gecrawlt werden?
- Sie können durch eine XML-Sitemap übermittelt werden.
- Sie können Links von anderen, Nicht-Kategorie-Unterseiten erhalten – etwa von anderen Produktseiten, mit dem Hinweis auf ähnliche Produkte oder Produkte, die Nutzer gern zusammen kaufen.
Frage 2: Wie kann Google verstehen, dass eine Produktseite zu einer bestimmten Kategorie gehört, wenn diese Produktseite für den Crawler nicht über die paginierte Kategorie-Unterseite erreichbar ist?
Hierfür kommt eine saubere Website-Struktur mit einer einer guten, hierarchischen URL-Struktur ins Spiel:
- Hierarchische, sprechende URLs, die die Kategorie-Struktur und das Produkt gut widerspiegeln helfen Google dabei, ein Produkt auch einer bestimmten Kategorie zuzuordnen. Beispiel: https://onlineshop.com/herren/jeans/levis511.html
- Nutzung der schema.org-Breadcrumbs, um Google damit auch über diesen Weg die Zughörigkeit eines Produktes zu einer bestimmten Kategorie mitzuteilen.
Zudem sollte die Produkt-Hierarchie kontrolliert werden. Wenn ein Produkt wichtiger wird – entweder weil es stark nachgefragt wird oder das Angebot groß ist – sollte es im Kategorie-Listing ebenfalls klettern und im Idealfall auf der indexierbaren Seite 1 der Kategorie-Übersicht stehen.
Zusammenfassung: Alle paginierte Seiten in den Index? Nein!
Meinte John Mueller, dass Google alle paginierten Seiten indexieren möchte? Nein! John sagte, dass Webmaster und SEOs all jene Seiten mit einem index-Atribut versehen sollen, die wirklich wichtig für Google sind. Meine Frage: Gilt dies aus eurer Sicht für die paginierten Kategorie-Unterseiten 2 bis 5000? Soll die Kategorie-Unterseite 4532 wirklich indexiert werden? Ist diese Seite wirklich wichtig für eure Website und euer Online Business?
Auch wenn paginierte Seiten nicht indexiert werden: Es gibt gute Wege, um alle Produktseiten von Google crawlen, indexieren und bewerten zu lassen, vor allem durch eine saubere, aussagekräftige Website-Architektur und die Nutzung von Bradcrumbs.