Warum Amethyst? Die Mission hinter den schlanken Shopify Apps

Einführung

Eine Seite zu veröffentlichen bedeutet nicht, dass Suchmaschinen sie indexieren werden.

Dies ist einer der frustrierendsten Teile der SEO. Man erstellt eine Seite, fügt sie der Website hinzu, reicht sie vielleicht in der Search Console ein und wartet dann. Tage vergehen. Manchmal Wochen. Die Seite erscheint immer noch nicht bei Google.

Das Problem ist, dass die Indexierung kein einziger Schritt ist. Eine Suchmaschine muss die URL entdecken, crawlen, rendern, verstehen, entscheiden, ob es sich lohnt, sie zu speichern, und dann entscheiden, ob sie in den Suchergebnissen erscheinen soll.

Wenn ein Teil dieses Prozesses fehlschlägt, wird die Seite möglicherweise nicht indexiert.

Dieser Leitfaden erklärt die häufigsten Gründe, warum Seiten nicht indexiert werden, wie man das Problem diagnostiziert und was zuerst behoben werden sollte.

Was bedeutet „nicht indexiert“ eigentlich?

Eine Seite ist nicht indexiert, wenn eine Suchmaschine die URL kennt, sie aber nicht zu ihrem durchsuchbaren Index hinzugefügt hat, oder wenn sie die URL überhaupt nicht entdeckt hat.

Es gibt verschiedene Situationen, die oft zusammengefasst werden:

• Die Suchmaschine hat die URL nicht gefunden.
• Die Suchmaschine hat die URL gefunden, aber nicht gecrawlt.
• Die Suchmaschine hat die URL gecrawlt, sich aber entschieden, sie nicht zu indexieren.
• Die Seite wurde zuvor indexiert, später aber wieder entfernt.
• Die Seite ist blockiert, weitergeleitet, kanonisiert oder als noindex markiert.

Jede Situation erfordert eine andere Lösung.

Crawling vs. Indexierung

Crawling und Indexierung sind nicht dasselbe.

Crawling bedeutet, dass eine Suchmaschine eine Seite besucht und deren Inhalt abruft.

Indexierung bedeutet, dass die Suchmaschine entscheidet, diese Seite in ihrem Index zu speichern, damit sie potenziell in den Suchergebnissen erscheinen kann.

Eine Seite kann gecrawlt und trotzdem nicht indexiert werden. Dies ist häufig der Fall.

Zum Beispiel kann Google eine Seite crawlen und entscheiden:

• Der Inhalt ist zu dünn.
• Die Seite ist eine Kopie einer anderen URL.
• Das Canonical Tag verweist auf eine andere Stelle.
• Die Seite bietet nicht genug Mehrwert.
• Die Seite ist von der Indexierung ausgeschlossen.

Deshalb ist das Einreichen einer URL nur ein Teil des Prozesses. Die Seite muss immer noch indexierungswürdig sein.

Wie Suchmaschinen Seiten entdecken

Suchmaschinen können Seiten auf verschiedene Weisen entdecken:

• Interne Links von anderen Seiten Ihrer Website
• XML-Sitemaps
• Externe Links von anderen Websites
• Manuelle Einreichung über die Search Console
• APIs und Benachrichtigungssysteme
• Crawling bekannter URL-Muster

Wenn eine Seite nirgendwo verlinkt ist, nicht in Ihrer Sitemap aufgeführt und nicht eingereicht wurde, kann es viel länger dauern, bis sie entdeckt wird.

Die Entdeckung ist die erste Hürde. Qualität und technische Bereitschaft kommen danach.

1. Die Seite wurde noch nie entdeckt

Manchmal ist das Problem einfach: Die Suchmaschine weiß nicht, dass die Seite existiert.

Dies geschieht häufig bei:

• Neuen Websites
• Neuen Blogbeiträgen
• Landing Pages, die nicht von der Navigation aus verlinkt sind
• Produktseiten, die tief in einem Katalog vergraben sind
• Seiten, die von JavaScript erstellt, aber nicht in der Sitemap enthalten sind
• Verwaiste Seiten ohne interne Links

Wie man es behebt:

• Fügen Sie die URL Ihrer XML-Sitemap hinzu.
• Verlinken Sie die Seite von relevanten bestehenden Seiten aus.
• Reichen Sie die URL über den entsprechenden Erkennungs-Workflow ein.
• Stellen Sie sicher, dass die Seite in Ihrer Website-Struktur enthalten ist.

Wenn eine Seite wichtig ist, verstecken Sie sie nicht.

2. Die Seite wird von robots.txt blockiert

robots.txt teilt Crawlern mit, welche Teile Ihrer Website sie nicht besuchen sollen.

Wenn Ihre Seite von robots.txt blockiert wird, können Suchmaschinen sie möglicherweise nicht richtig crawlen.

Beispiel:

User-agent: *
Disallow: /blog/

Dies würde Crawlern den Zugriff auf Seiten innerhalb von /blog/ blockieren.

Wie man es behebt:

• Überprüfen Sie https://ihredomain.com/robots.txt.
• Stellen Sie sicher, dass wichtige Bereiche nicht blockiert sind.
• Testen Sie die Seite in der Google Search Console.
• Entfernen Sie versehentliche Disallow-Regeln.

Verwenden Sie robots.txt nicht zur Verwaltung der Indexierung, es sei denn, Sie verstehen die Konsequenzen. Wenn eine Seite vom Crawling blockiert wird, können Suchmaschinen wichtige Indexierungssignale auf der Seite möglicherweise nicht sehen.

3. Die Seite hat einen Noindex-Tag

Eine Noindex-Anweisung weist Suchmaschinen an, eine Seite nicht zu indexieren.

Sie kann als Meta-Tag erscheinen:

<meta name="robots" content="noindex">

Oder als HTTP-Header.

Dies ist nützlich für private, doppelte, dünne oder minderwertige Seiten. Aber es ist ein ernstes Problem, wenn es auf einer Seite erscheint, die Sie indexiert haben möchten.

Wie man es behebt:

• Untersuchen Sie den Seitenquellcode.
• Überprüfen Sie die Einstellungen des SEO-Plugins.
• Überprüfen Sie die Sichtbarkeitseinstellungen der CMS-Seite.
• Entfernen Sie Noindex von Seiten, die in der Suche erscheinen sollen.

Eine Seite mit Noindex kann entdeckt und gecrawlt werden, sollte aber nicht indexiert werden.

4. Kanonische Tags verweisen auf eine andere Stelle

Ein kanonisches Tag teilt Suchmaschinen mit, welche URL die bevorzugte Version einer Seite ist.

Beispiel:

<link rel="canonical" href="https://example.com/main-page">

Wenn Ihre Seite ein kanonisches Tag hat, das auf eine andere URL verweist, können Suchmaschinen stattdessen die kanonische URL indexieren.

Das ist nicht immer falsch. Kanonische Tags sind nützlich für doppelte oder ähnliche Seiten. Aber wenn jede Seite auf die Startseite verweist oder wenn wichtige Seiten auf die falsche URL verweisen, kann die Indexierung unterbrochen werden.

Wie man es behebt:

• Überprüfen Sie das kanonische Tag auf der Seite.
• Stellen Sie sicher, dass es auf die richtige Version verweist.
• Vermeiden Sie versehentliche selbst-kanonische Fehler.
• Kanonisieren Sie keine einzigartigen Seiten auf nicht verwandte Seiten.

Wenn Sie eine Seite indexiert haben möchten, benötigt sie normalerweise ein selbstverweisendes kanonisches Tag.

5. Die Seite gibt einen Fehlerstatus zurück

Suchmaschinen müssen erfolgreich auf die Seite zugreifen können.

Wenn die URL einen Fehler zurückgibt, ist eine Indexierung unwahrscheinlich.

Häufige Statusprobleme sind:

• 404 nicht gefunden
• 410 verschwunden
• 500 Serverfehler
• 503 nicht verfügbar
• Weiterleitungsschleifen
• Blockierte Ressourcen

Wie man es behebt:

• Überprüfen Sie den HTTP-Statuscode.
• Beheben Sie fehlerhafte Routen.
• Beheben Sie Serverfehler.
• Vermeiden Sie Weiterleitungsketten.
• Stellen Sie sicher, dass das endgültige Ziel 200 zurückgibt.

Eine Seite, die technisch fehlerhaft ist, wird Schwierigkeiten haben, indexiert zu werden, selbst wenn der Inhalt gut ist.

6. Dünner oder minderwertiger Inhalt

Manchmal ist die Seite technisch in Ordnung, aber der Inhalt ist nicht stark genug.

Eine dünne Seite kann haben:

• Sehr wenig Originalinhalt
• Generischen Text
• Keinen klaren Zweck
• Keine nützlichen Antworten
• Keinen einzigartigen Wert
• Duplizierte Herstellerbeschreibungen
• Leere Kategorieseiten

Suchmaschinen müssen nicht jede Seite indexieren, die sie finden. Wenn eine Seite wenig Mehrwert bietet, kann sie gecrawlt, aber nicht indexiert werden.

Wie man es behebt:

• Fügen Sie nützliche Originalinformationen hinzu.
• Beantworten Sie echte Benutzerfragen.
• Fügen Sie relevante Beispiele hinzu.
• Verbessern Sie interne Links.
• Fügen Sie strukturierte Abschnitte hinzu.
• Entfernen oder fassen Sie schwache Seiten zusammen.

Das häufigere Einreichen einer dünnen Seite wird das Problem nicht beheben. Verbessern Sie die Seite zuerst.

7. Duplizierter Inhalt

Duplizierter Inhalt ist ein weiterer häufiger Grund, warum Seiten nicht indexiert werden.

Wenn mehrere URLs fast den gleichen Inhalt enthalten, können Suchmaschinen eine auswählen und die anderen ignorieren.

Häufige Beispiele sind:

• Produktvarianten
• Gefilterte Sammlungsseiten
• Druckerfreundliche Seiten
• Standortseiten mit fast identischem Text
• Kopierte Lieferantenbeschreibungen
• URL-Parameter, die Duplikate erzeugen

Wie man es behebt:

• Verwenden Sie kanonische Tags korrekt.
• Konsolidieren Sie doppelte Seiten.
• Fügen Sie einzigartigen Inhalt hinzu, wo Seiten eigenständig sein müssen.
• Blockieren oder deindexieren Sie minderwertige Parameterseiten, wenn angemessen.
• Verbessern Sie die interne Verlinkung zur bevorzugten Version.

Duplizierte Seiten sind nicht immer ein Strafproblem. Oft entscheiden sich Suchmaschinen einfach dafür, nicht jede Version zu indexieren.

8. Schlechte interne Verlinkung

Interne Links helfen Suchmaschinen, Seiten zu entdecken und deren Bedeutung zu verstehen.

Wenn eine Seite nur sehr wenige interne Links hat, die auf sie verweisen, können Suchmaschinen sie als weniger wichtig behandeln.

Dies ist besonders häufig bei:

• Alten Blogbeiträgen
• Landing Pages
• Neuen Dienstleistungsseiten
• Tiefen Produktseiten
• Saisonalen Seiten
• Seiten, die außerhalb der Hauptnavigation erstellt wurden

Wie man es behebt:

• Verlinken Sie die Seite von relevanten bestehenden Seiten aus.
• Fügen Sie Links von Kategorie- oder Hub-Seiten hinzu.
• Verwenden Sie beschreibenden Ankertext.
• Fügen Sie die Seite gegebenenfalls in eine nützliche Navigation ein.
• Verlinken Sie von Seiten, die bereits indexiert sind und gut funktionieren.

Interne Verlinkung ist eine der einfachsten Möglichkeiten, die Entdeckung zu verbessern.

9. Verwaiste Seiten

Eine verwaiste Seite ist eine Seite ohne interne Links, die auf sie verweisen.

Suchmaschinen können verwaiste Seiten immer noch über Sitemaps oder externe Links entdecken, aber sie sind schwieriger zu verstehen und zu priorisieren.

Wenn eine Seite wichtig genug ist, um zu ranken, sollte sie normalerweise mit dem Rest Ihrer Website verbunden sein.

Wie man es behebt:

• Finden Sie verwaiste Seiten mit einem Crawl-Tool oder Site-Audit.
• Fügen Sie interne Links von relevanten Seiten hinzu.
• Fügen Sie wichtige Seiten in Ihre Sitemap ein.
• Gruppieren Sie verwandte Inhalte in Hubs.
• Entfernen Sie verwaiste Seiten, die keinen Zweck erfüllen.

Eine Seite ohne interne Links sendet ein schwaches Signal über ihre Bedeutung.

10. Geringe Website-Autorität

Neue oder Websites mit geringer Autorität brauchen oft länger, um Seiten indexiert zu bekommen.

Suchmaschinen haben begrenzte Crawl-Ressourcen. Sie crawlen vertrauenswürdige, aktive und autoritative Websites tendenziell häufiger.

Wenn Ihre Website neu ist, wenige Backlinks, eine schwache interne Struktur oder nur eine sehr geringe Inhaltsgeschichte hat, kann die Indexierung langsamer sein.

Wie man dies verbessert:

• Veröffentlichen Sie konsequent nützliche Inhalte.
• Erstellen Sie interne Links zwischen verwandten Seiten.
• Erwerben Sie relevante externe Links.
• Halten Sie Ihre Sitemap sauber.
• Vermeiden Sie die Veröffentlichung großer Mengen schwacher Seiten.

Autorität hängt nicht nur von Links ab. Es geht auch um Vertrauen, Nützlichkeit und Konsistenz.

11. Crawl-Budget-Probleme

Das Crawl-Budget ist die Menge an Crawling, die eine Suchmaschine für Ihre Website aufwenden möchte.

Für kleine Websites ist das Crawl-Budget normalerweise nicht das Hauptproblem. Aber für große E-Commerce-Websites, Verzeichnisse, Publisher und programmatische SEO-Websites kann es wichtig sein.

Crawl-Budget-Probleme können auftreten, wenn Suchmaschinen Zeit verschwenden mit:

• Doppelten URLs
• Filterseiten
• Suchergebnisseiten
• Unendlichen URL-Parametern
• Weiterleitungsketten
• Fehlerhaften Seiten
• Dünnen Seiten

Wie man es behebt:

• Bereinigen Sie doppelte URL-Muster.
• Verbessern Sie kanonische Tags.
• Entfernen Sie minderwertige URLs aus Sitemaps.
• Beheben Sie Weiterleitungsketten.
• Blockieren oder deindexieren Sie minderwertige Abschnitte sorgfältig.
• Verbessern Sie die Website-Geschwindigkeit und Serverzuverlässigkeit.

Ziel ist es, Crawlern zu helfen, mehr Zeit auf den wichtigen Seiten zu verbringen.

12. JavaScript-Rendering-Probleme

Einige Seiten verlassen sich stark auf JavaScript, um Inhalte zu rendern.

Suchmaschinen können JavaScript verarbeiten, aber es kann langsamer oder komplexer sein als das Crawlen von normalem HTML.

Wenn wichtige Inhalte, Links, Titel oder strukturierte Daten erst nach der Ausführung von JavaScript erscheinen, können Entdeckung und Indexierung beeinträchtigt werden.

Wie man es behebt:

• Stellen Sie wichtige Inhalte, wo möglich, in serverseitig gerendertem HTML zur Verfügung.
• Überprüfen Sie das gerenderte HTML.
• Testen Sie mit der URL-Prüfung der Search Console.
• Vermeiden Sie es, wichtige Links hinter Skripten zu verstecken.
• Stellen Sie sicher, dass strukturierte Daten vorhanden und gültig sind.

Wenn Benutzer und Crawler nicht dieselben wichtigen Inhalte sehen können, kann die Indexierung unzuverlässig werden.

13. Kürzlich veröffentlichte Seiten

Manchmal ist nichts falsch. Die Seite ist einfach neu.

Suchmaschinen indexieren nicht jede Seite sofort. Selbst starke Seiten können einige Zeit brauchen, bis sie erscheinen.

Die Indexierungsgeschwindigkeit hängt ab von:

• Website-Autorität
• Internen Links
• Aktualität der Sitemap
• Crawl-Frequenz
• Seitenqualität
• Technischem Zustand
• Nachfrage der Suchmaschine

Wie man damit umgeht:

• Stellen Sie sicher, dass die Seite crawlbar ist.
• Fügen Sie interne Links hinzu.
• Fügen Sie sie in die Sitemap ein.
• Reichen Sie sie über Ihren normalen Workflow ein.
• Beobachten Sie sie im Laufe der Zeit.

Reichen Sie nicht alle paar Minuten erneut ein. Beheben Sie zuerst echte Probleme.

14. Soft 404-Seiten

Ein Soft 404 tritt auf, wenn eine Seite einen 200-Statuscode zurückgibt, aber wie eine leere oder fehlende Seite aussieht.

Zum Beispiel:

• Eine Produktseite ohne Produkt
• Eine Kategorieseite ohne Artikel
• Eine dünne Seite, die besagt, dass Inhalte nicht gefunden wurden
• Eine Vorlagenseite mit fast keinen nützlichen Informationen

Suchmaschinen können diese Seiten als minderwertig oder fehlend behandeln, auch wenn der Server angibt, dass sie existieren.

Wie man es behebt:

• Fügen Sie nützliche Inhalte hinzu.
• Geben Sie einen ordnungsgemäßen 404 oder 410 für entfernte Seiten zurück.
• Leiten Sie Benutzer bei Bedarf zu einem relevanten Ersatz weiter.
• Vermeiden Sie das Indexieren leerer Vorlagen.

Eine Seite muss echten Wert bieten, nicht nur einen erfolgreichen Statuscode zurückgeben.

15. Suchmaschinen haben sich einfach entschieden, sie nicht zu indexieren

Das ist die Antwort, die niemand mag, aber sie stimmt oft.

Suchmaschinen sind nicht verpflichtet, jede crawlbar Seite zu indexieren.

Eine Seite kann technisch gültig sein und trotzdem nicht in den Index aufgenommen werden, wenn die Suchmaschine entscheidet, dass sie nicht nützlich genug ist.

Dies kann passieren, wenn:

• Das Thema bereits anderswo besser behandelt wird.
• Die Seite wenig einzigartigen Wert bietet.
• Die Website viele ähnliche Seiten hat.
• Der Inhalt generisch ist.
• Die Seite schwache interne Links hat.
• Die Gesamtqualität der Website gering ist.

Wie man es behebt:

• Verbessern Sie den Inhalt.
• Machen Sie die Seite nützlicher als konkurrierende Ergebnisse.
• Fügen Sie originelle Beispiele, Daten oder Anleitungen hinzu.
• Stärken Sie interne Links.
• Konsolidieren Sie ähnliche Seiten.
• Bauen Sie thematische Autorität zu dem Thema auf.

Die Indexierung ist nicht nur technisch. Sie ist auch redaktionell.

Wie man Indexierungsprobleme diagnostiziert

Eine gute Indexierungsdiagnose folgt einer Reihenfolge.

Beginnen Sie mit der Entdeckung:

• Ist die URL in der Sitemap?
• Ist sie intern verlinkt?
• Wurde sie eingereicht?
• Hat die Search Console sie entdeckt?

Überprüfen Sie dann den technischen Zugriff:

• Gibt sie 200 zurück?
• Ist sie durch robots.txt blockiert?
• Hat sie noindex?
• Verweist der kanonische Link woanders hin?
• Leitet sie weiter?

Überprüfen Sie dann die Qualität:

• Ist der Inhalt nützlich?
• Ist er einzigartig?
• Beantwortet er ein echtes Suchbedürfnis?
• Ist er besser als konkurrierende Seiten?
• Hat er genug interne Unterstützung?

Dann überwachen:

• Wurde sie gecrawlt?
• Wurde sie indexiert?
• Sind Impressionen erschienen?
• Sind Klicks erschienen?
• Haben sich die Rankings nach Korrekturen geändert?

Dieser Prozess ist nützlicher, als einfach erneut auf „Senden“ zu klicken.

Eine einfache Indexierungs-Checkliste

Bevor Sie eine URL einreichen, prüfen Sie:

• Die Seite gibt 200 zurück.
• Die Seite ist nicht durch robots.txt blockiert.
• Die Seite hat kein noindex.
• Der kanonische Link verweist auf sich selbst.
• Die Seite ist in der Sitemap enthalten.
• Die Seite hat interne Links.
• Titel und H1 sind klar.
• Der Inhalt ist nützlich und originell.
• Strukturierte Daten sind gültig, wo relevant.
• Die Seite lädt korrekt auf Mobilgeräten.
• Wichtige Inhalte sind im gerenderten HTML sichtbar.
• Die Seite ist kein Duplikat.

Wenn mehrere dieser Schritte fehlschlagen, beheben Sie das Problem auf der Seite, bevor Sie versuchen, sie indexieren zu lassen.

Wie IndexStream hilft

IndexStream wurde entwickelt, um die Indexierung weniger verwirrend und nachvollziehbarer zu gestalten.

Anstatt die Indexierung als einmalige Einreichung zu behandeln, bietet es Ihnen einen Workflow:

• URLs einreichen.
• Protokollieren, was eingereicht wurde.
• Überprüfen, ob Anfragen akzeptiert wurden.
• Bereitschaft der Seite prüfen.
• Fix-Karten generieren.
• Wettbewerber benchmarken.
• Content-Briefings erstellen.
• Search Console und Analysedaten überwachen.
• Korrekturen im Zeitverlauf verfolgen.

Ziel ist es nicht, die Indexierung zu garantieren. Das kann kein seriöses Tool.

Ziel ist es, Ihnen zu helfen zu verstehen, was passiert ist, was die Auffindbarkeit blockiert und was als Nächstes behoben werden muss.

Für weitere Informationen siehe Google Indexing API erklärt, Was ist IndexNow? und Technische SEO-Checkliste.

Abschließende Gedanken

Wenn eine Seite nicht indexiert ist, gehen Sie nicht davon aus, dass die einzige Lösung darin besteht, sie erneut einzureichen.

Beginnen Sie damit, bessere Fragen zu stellen:

• Wurde die Seite entdeckt?
• Kann sie gecrawlt werden?
• Ist sie für die Indexierung zugelassen?
• Ist der kanonische Link korrekt?
• Ist der Inhalt ausreichend nützlich?
• Ist sie intern verlinkt?
• Unterscheidet sie sich von anderen Seiten?

Indexierungsprobleme sind oft eine Mischung aus Auffindbarkeit, technischer Qualität, Inhaltsqualität und Priorisierung.

Die stärksten SEO-Workflows pushen nicht nur mehr URLs. Sie helfen Ihnen zu entscheiden, welche Seiten es wert sind, eingereicht zu werden, was behoben werden muss und ob die Korrekturen die Sichtbarkeit tatsächlich verbessert haben.

Häufig gestellte Fragen

Warum wird meine Seite nicht indexiert?

Ihre Seite wird möglicherweise nicht indexiert, weil sie nicht entdeckt wurde, blockiert ist, Noindex enthält, auf eine andere kanonische URL verweist, dünnen Inhalt hat, eine andere Seite dupliziert oder die Qualitätsanforderungen der Suchmaschinen nicht erfüllt.

Wie lange dauert die Indexierung?

Die Indexierung kann Minuten, Tage oder Wochen dauern. Der Zeitpunkt hängt von der Website, der Seitenqualität, der Crawl-Anforderung, internen Links und den Entscheidungen der Suchmaschine ab.

Garantiert das Einreichen einer URL die Indexierung?

Nein. Das Einreichen einer URL kann bei der Entdeckung helfen, aber Suchmaschinen entscheiden immer noch, ob sie sie crawlen und indexieren.

Kann eine Seite gecrawlt, aber nicht indexiert werden?

Ja. Eine Suchmaschine kann eine Seite crawlen und sich trotzdem dafür entscheiden, sie nicht zu indexieren.

Stoppt robots.txt die Indexierung?

robots.txt blockiert das Crawling, nicht direkt die Indexierung. Wenn eine Seite jedoch nicht gecrawlt werden kann, können Suchmaschinen möglicherweise keine wichtigen Indexierungssignale erkennen.

Was ist eine verwaiste Seite?

Eine verwaiste Seite ist eine Seite, auf die keine internen Links verweisen. Verwaiste Seiten sind für Suchmaschinen schwerer zu entdecken und zu verstehen.

Wie weiß ich, ob Google meine Seite entdeckt hat?

Verwenden Sie die Google Search Console URL-Prüfung, Sitemap-Berichte, Serverprotokolle oder ein Indexierungs-Workflow-Tool, um zu überprüfen, ob die Seite entdeckt oder gecrawlt wurde.