Zum Inhalt springen
SONOYA.com
Selfhosting & Web

Search Console: Gecrawlt, zurzeit nicht indexiert

Was „Gecrawlt, zurzeit nicht indexiert“ in der Search Console bedeutet, wie Du noindex, Canonical und robots.txt prüfst und was wirklich hilft.

Von

Lupe über einem Dokument auf farbigem Verlauf als Sinnbild für die URL-Prüfung, mit der Du in der Google Search Console nicht indexierte Seiten untersuchst

Du öffnest in der Google Search Console den Bericht zur Seitenindexierung und siehst eine lange Liste mit dem Grund „Gecrawlt – zurzeit nicht indexiert“, daneben vielleicht noch „Gefunden – zurzeit nicht indexiert“ und ein paar Duplikate. Der erste Reflex ist, jede URL einzeln mit „Indexierung beantragen“ nachzuschieben. Das hilft fast nie. Dieser Artikel erklärt, was die wichtigsten Statusmeldungen wirklich bedeuten, wie Du technische Ursachen in wenigen Minuten ausschließt und an welchen Stellen Du stattdessen am Inhalt ansetzen musst.

Die Bezeichnungen und Empfehlungen stammen aus Googles eigener Hilfe zum Bericht zur Seitenindexierung mit Stand November 2026. Die Prüfbefehle habe ich gegen sonoya.com ausgeführt, die Ausgaben weiter unten sind echt.

Erst einordnen: Nicht jede Seite gehört in den Index

Google sagt in seiner Hilfe sehr deutlich, dass Du keine hundertprozentige Abdeckung erwarten sollst. Indexiert werden nur kanonische Seiten, also pro Inhalt eine Adresse. Weiterleitungen, Varianten mit Parametern, Seiten mit noindex und gelöschte Seiten tauchen deshalb zwangsläufig unter „Nicht indexiert“ auf, und das ist gewollt.

Der Bericht wird erst dann zum Problem, wenn dort Seiten stehen, die Du in der Suche sehen willst: Artikel, Produktseiten, Kategorieseiten mit eigenem Wert. Filtere den Bericht deshalb zuerst auf diese Seiten. Am einfachsten geht das, indem Du oben im Bericht statt „Alle bekannten Seiten“ Deine Sitemap auswählst. Was in der Sitemap steht, hast Du Google ausdrücklich als wichtig gemeldet, und nur darum musst Du Dich kümmern.

Die wichtigsten Statusmeldungen auf einen Blick

Status in der Search ConsoleWas er bedeutetWas Du tust
Gecrawlt – zurzeit nicht indexiertGoogle hat die Seite abgerufen und sich gegen die Aufnahme entschieden.Technik ausschließen, dann am Inhalt arbeiten (siehe unten).
Gefunden – zurzeit nicht indexiertGoogle kennt die URL, hat sie aber noch nicht abgerufen und den Abruf verschoben.Interne Links stärken, Sitemap prüfen, Server-Antwortzeiten prüfen, abwarten.
Duplikat – Google hat eine andere Seite als der Nutzer als kanonische Seite bestimmtDu hast per Canonical eine Seite als Original markiert, Google hält eine andere für das Original.In der URL-Prüfung beide Adressen vergleichen, Inhalte klarer unterscheiden oder zusammenlegen.
Duplikat – vom Nutzer nicht als kanonisch festgelegtMehrere Adressen zeigen denselben Inhalt, es gibt kein Canonical, Google hat selbst gewählt.Prüfen, welche Adresse Google gewählt hat. Ist es die falsche, ein Canonical setzen.
Alternative Seite mit richtigem kanonischen TagDie Seite verweist korrekt auf ein Original, das indexiert ist.Nichts. Das ist der Normalfall.
URL als „noindex“ markiertDie Seite verbietet die Aufnahme selbst.Nur handeln, wenn die Seite in den Index soll: noindex entfernen.
Seite mit WeiterleitungDie Adresse leitet weiter, indexiert wird das Ziel.Nichts, solange das Ziel stimmt.
Nicht gefunden (404)Die Seite existiert nicht.Bei Absicht nichts. Ist der Inhalt umgezogen, eine 301-Weiterleitung einrichten.
Soft 404-FehlerDie Seite liefert Status 200, wirkt aber leer oder wie eine Fehlerseite.Echte Fehlerseiten mit 404 oder 410 ausliefern, dünne Seiten ausbauen.
URL wird von der robots.txt-Datei blockiertGoogle darf die Seite nicht abrufen.Sperre aufheben, falls die Seite in den Index soll.

Für die beiden Meldungen, die am häufigsten Fragen auslösen, lohnt sich ein genauerer Blick.

Gecrawlt, zurzeit nicht indexiert

Hier hat Google die Seite tatsächlich gelesen. Ein technisches Hindernis liegt also meist nicht vor, sonst stünde ein anderer Grund im Bericht. Google hat die Seite schlicht als nicht aufnahmewürdig bewertet, zumindest im Moment. Google bezeichnet den Status selbst als häufig und oft unproblematisch. Betrifft er aber viele wichtige Seiten, ist das ein Hinweis auf ein Problem, das die ganze Website betrifft, meistens die Qualität oder zu viele ähnliche Seiten.

Gefunden, zurzeit nicht indexiert

Bei dieser Meldung war Google noch gar nicht auf der Seite. Die URL ist aus einer Sitemap oder einem Link bekannt, der Abruf wurde aber verschoben, laut Google häufig, damit der Server nicht überlastet wird. Bei neuen Websites und kleinen Servern ist das normal und erledigt sich mit der Zeit. Hält der Zustand über Monate an, hat Google entweder zu wenig Gründe, die Seite zu besuchen (kaum interne Links), oder Dein Server antwortet zu langsam. Die Antwortzeiten findest Du in der Search Console unter Einstellungen > Crawling-Statistiken.

Die URL-Prüfung richtig nutzen

Der Bericht zeigt Dir Gruppen, die URL-Prüfung zeigt Dir den Einzelfall. Kopiere eine betroffene Adresse in das Suchfeld ganz oben in der Search Console und bestätige mit Enter. Das Ergebnis zeigt zunächst den Stand aus dem Index, also das, was Google beim letzten Besuch gesehen hat. Klapp dort den Bereich Seitenindexierung auf. Drei Angaben sind wichtig:

  • Indexierung zulässig? Steht hier „Nein“ mit Verweis auf noindex, hast Du die Ursache bereits.
  • Vom Nutzer angegebene kanonische URL und Von Google ausgewählte kanonische URL: Weichen die beiden voneinander ab, hält Google eine andere Adresse für das Original.
  • Letzter Crawl: Das Datum zeigt, ob Google eine Änderung überhaupt schon gesehen haben kann.

Mit Live-URL testen oben rechts ruft Google die Seite sofort neu ab. So siehst Du, ob eine Korrektur, etwa ein entferntes noindex, tatsächlich ankommt. Der Live-Test sagt aber nichts darüber, ob die Seite danach auch aufgenommen wird. Die Details beschreibt Google in der Hilfe zum URL-Prüftool.

Technische Ursachen in fünf Minuten ausschließen

Bevor Du am Inhalt zweifelst, prüfst Du die drei technischen Klassiker: einen noindex-Hinweis, ein falsches Canonical und eine Sperre in der robots.txt. Das geht ohne Plugin direkt im Terminal mit curl, das auf macOS, Linux und Windows 11 vorinstalliert ist.

Zuerst der Statuscode und die HTTP-Header. Ein noindex kann nämlich auch im Header stehen, wo Du ihn im Quelltext nie findest:

Code
curl -sI https://example.com/deine-seite/

Ersetze die Adresse durch die URL aus dem Bericht. In der ersten Zeile muss HTTP/2 200 oder HTTP/1.1 200 stehen. Bei 301 oder 302 leitet die Seite weiter, dann prüfst Du das Ziel aus der Zeile location:. Taucht irgendwo eine Zeile x-robots-tag: noindex auf, verbietet Dein Server die Indexierung, meist über eine Regel in der Webserver-Konfiguration oder ein Sicherheits-Plugin.

Danach prüfst Du die beiden Angaben im HTML-Kopf der Seite:

Code
curl -s https://example.com/deine-seite/ | grep -oiE '<link rel="canonical"[^>]*>|<meta name="robots"[^>]*>'

Der Befehl lädt die Seite und zeigt nur die Zeilen mit dem Canonical und der Robots-Angabe. So sieht das auf sonoya.com für eine Themenseite aus, die bewusst nicht in den Index soll:

Code
<link rel="canonical" href="https://sonoya.com/tag/anleitung/">
<meta name="robots" content="noindex, follow">

Und so für eine Themenseite, die indexiert werden soll:

Code
<link rel="canonical" href="https://sonoya.com/tag/raspberry-pi/">
<meta name="robots" content="index, follow, max-image-preview:large, max-snippet:-1, max-video-preview:-1">

Das Canonical muss auf die Adresse selbst zeigen, mit identischem Protokoll, identischer Domain und demselben Schrägstrich am Ende. Zeigt es auf eine andere Seite, sagst Du Google selbst, dass diese Seite nur eine Kopie ist. Steht in der Robots-Angabe noindex, ist die Sache ebenfalls klar. Bei WordPress lohnt in diesem Fall ein Blick auf Einstellungen > Lesen: Ist dort Suchmaschinen davon abhalten, diese Website zu indexieren angehakt, trägt jede Seite ein noindex. Das passiert gern, wenn eine Seite von einer Testumgebung in den Live-Betrieb umzieht.

Zum Schluss die robots.txt:

Code
curl -s https://example.com/robots.txt

Steht dort eine Disallow-Zeile, deren Pfad Deine Seite einschließt, darf Google sie nicht abrufen. Wichtig dabei: Die robots.txt steuert nur das Crawling, nicht die Indexierung. Willst Du eine Seite aus dem Index heraushalten, ist laut Googles Anleitung zum Blockieren der Indexierung noindex das richtige Mittel, und die Seite darf dann gerade nicht per robots.txt gesperrt sein, sonst sieht Google das noindex nie.

Wenn die Technik stimmt: Qualität und Duplikate

Liefert die Seite Status 200, zeigt das Canonical auf sich selbst und steht nirgends noindex, dann ist „Gecrawlt – zurzeit nicht indexiert“ eine inhaltliche Entscheidung von Google. Google beschreibt in Hilfreiche, zuverlässige Inhalte erstellen, wonach es Inhalte bewertet, und die Fragen dort sind die beste Checkliste für Deine betroffenen Seiten. In der Praxis stecken fast immer dieselben Muster dahinter:

  • Dünne Seiten: Ein paar Sätze, ein eingebettetes Video oder eine reine Linkliste ohne eigene Substanz.
  • Fast gleiche Seiten: Viele Artikel, Tag- oder Archivseiten, die sich nur in Details unterscheiden. Google nimmt dann wenige davon auf und lässt den Rest liegen.
  • Veraltete Inhalte: Meldungen, Rabattaktionen oder Anleitungen für Software, die es nicht mehr gibt.
  • Schwache interne Verlinkung: Seiten, auf die innerhalb Deiner Website kaum ein Link zeigt, wirken für Google unwichtig.

Bei Duplikaten hilft Googles Anleitung zur Kanonisierung. Die Grundregel ist einfach: Pro Thema eine Seite. Behandeln zwei Seiten dasselbe, führst Du sie zusammen und leitest die überflüssige Adresse per 301 auf die verbleibende weiter. Wie das bei einem kompletten Umzug aussieht, zeigt Domain-Wechsel ohne SEO-Verlust: Umzug Schritt für Schritt.

Wichtig ist auch der Blick aufs Ganze. Google bewertet nicht jede Seite isoliert. Viele schwache Seiten können die Einschätzung der ganzen Website drücken, und dann bleiben auch gute neue Artikel länger im Status „Gecrawlt“ hängen. Deshalb bringt es oft mehr, schwache Seiten zu verbessern oder zu entfernen, als neue zu schreiben.

Was nicht hilft

Ständig „Indexierung beantragen“. Die Schaltfläche in der URL-Prüfung bittet Google nur, die Seite erneut abzurufen. Hat Google die Seite schon gelesen und abgelehnt, liest es sie eben noch einmal und entscheidet gleich. Sinnvoll ist der Antrag nur nach einer echten Änderung, etwa einem entfernten noindex oder einer deutlich überarbeiteten Seite. Das tägliche Kontingent dafür ist ohnehin begrenzt.

„Fehlerbehebung überprüfen“ bei Gecrawlt. Die Schaltfläche im Bericht ist für echte Fehler gedacht, die Du behoben hast. Die Prüfung dauert laut Google in der Regel etwa zwei Wochen und darf in dieser Zeit nicht neu gestartet werden. Für eine Qualitätsentscheidung bringt sie nichts, denn behobene Probleme erkennt Google auch beim normalen Crawling.

IndexNow. Das Protokoll meldet neue und geänderte Seiten sofort an Bing, Yandex und andere teilnehmende Suchmaschinen. Google gehört nicht dazu. Für Bing lohnt es sich trotzdem, wie in IndexNow: Neue Seiten sofort an Bing melden beschrieben.

Die site:-Abfrage als Messinstrument. Eine Suche nach site:example.com zeigt nur eine grobe Stichprobe und keine verlässliche Zahl indexierter Seiten. Wofür der Operator wirklich taugt, steht in Google-Suchoperatoren: gezielter suchen mit site: und Co.. Maßgeblich bleibt der Bericht in der Search Console.

Ein Beispiel von sonoya.com

sonoya.com ist aus einer langjährigen WordPress-Installation hervorgegangen, und genau die beschriebenen Muster tauchten hier auf. Google hatte viele Themenseiten aus der WordPress-Zeit als „Gecrawlt – zurzeit nicht indexiert“ abgelegt. Viele davon hießen nach allgemeinen Wörtern wie „anleitung“ oder „wie-kann-man“ und listeten nur Artikel auf, die anderswo schon verlinkt waren.

Im November 2026 haben wir deshalb zweierlei geändert. Von den heute 112 Themenseiten dürfen nur noch 58 echte Fachthemen wie Raspberry Pi oder Home Assistant in den Index, die übrigen tragen noindex, follow und fehlen in der Sitemap. Die Links darauf funktionieren für Leser weiter, Google bekommt aber nur noch die Seiten angeboten, die einen eigenen Wert haben. Außerdem haben wir in einem Inhalts-Audit 248 veraltete Artikel entfernt, die heute mit Status 410 antworten, und 18 doppelte Artikel per 301 mit ihrem jeweils besseren Gegenstück zusammengelegt. Ob und wie stark sich das auf die Indexierung auswirkt, lässt sich erst nach einigen Monaten im Bericht ablesen. Die Maßnahmen setzen aber genau dort an, wo Google selbst die Ursachen für diesen Status verortet.

Fazit

„Gecrawlt – zurzeit nicht indexiert“ ist kein Fehler, den Du mit einem Klick behebst, sondern eine Rückmeldung zu Deinen Inhalten. Schließ zuerst mit der URL-Prüfung und den drei curl-Befehlen die technischen Ursachen aus. Liegt es nicht an noindex, Canonical oder robots.txt, bring die betroffenen Seiten inhaltlich nach vorn, leg Dubletten zusammen und räum dünne Seiten auf. Danach braucht es Geduld: Google besucht die Seiten in seinem eigenen Rhythmus erneut, und die Zahlen im Bericht folgen mit einigen Wochen Verzögerung.

Weiterlesen.