Indexiert, obwohl durch robots.txt blockiert

Google hält sich an Ihre robots.txt und ruft die Seite nicht ab. Trotzdem hat Google die Adresse indexiert, weil andere Seiten auf sie verlinken. In den Suchergebnissen erscheint sie mit wenig oder ohne Beschreibung.

Sie müssen nur eins entscheiden

Soll diese Seite bei Google erscheinen?

Ja: Entfernen oder ändern Sie die robots.txt-Regel, die sie sperrt. Google liest die Seite wieder, und das Suchergebnis bekommt einen echten Titel und eine Beschreibung.
Nein: Entfernen Sie die Sperre in der robots.txt und setzen Sie noindex auf die Seite. Das klingt widersprüchlich, aber Google muss die Seite abrufen, um noindex zu sehen. Mit der Sperre sieht Google es nie.

Wann es Sie nicht kümmern muss

Shopify-Shops sehen diese Meldung oft bei Warenkorb und gefilterten Kollektionen, die die Standard-robots.txt absichtlich sperrt. Die Shopify-Hilfe nennt das normal. Bringt die Seite keine Besucher und stört nicht, lassen Sie sie.

Kümmern sollten Sie sich, wenn hier Ihre Startseite oder ein wichtiges Produkt steht. Dann sperrt die robots.txt etwas, das Sie bei Google haben wollen.

Die Regel finden

Suchen Sie im robots.txt-Bericht der Search Console die Disallow-Zeile, die auf die Adresse passt. In der URL-Prüfung zeigt „Crawling erlaubt?“ für diese Seiten „Nein: Durch robots.txt-Datei blockiert“.

Widersprüchliche Signale beenden

In den kostenpflichtigen Tarifen meldet CrawlCoach, wenn eine Seite Ihrer Sitemap durch die robots.txt gesperrt ist. Eine Sitemap, die eine gesperrte Seite zur Indexierung anbietet, sendet Google widersprüchliche Signale, und die Meldung sagt Ihnen, was Sie ändern sollten: die Regel oder die Sitemap.

Häufige Fragen

Warum indexiert Google eine Seite, die es nicht besuchen darf?

Weil andere Seiten auf sie verlinken. Google kann die Adresse aus diesen Links indexieren, ohne die Seite zu lesen. Deshalb fehlt im Suchergebnis meist die Beschreibung.

Soll ich die robots.txt-Regel entfernen oder behalten?

Entfernen, wenn die Seite bei Google erscheinen soll. Behalten, wenn sie privat oder ein Duplikat ist, und die Meldung ignorieren. Um sie ganz aus Google zu entfernen, löschen Sie die Regel und setzen noindex.

Quellen

Geprüft am 8. Oktober 2026. Google ändert die Search Console und die Hilfe ab und zu. Sieht etwas auf Ihrem Bildschirm anders aus, sehen Sie in der Quelle nach.

„Indexiert, obwohl durch robots.txt-Datei blockiert“: freigeben oder entfernen