„URLs with crawling issues (server errors)“ bei Bing: 403 und 5xx
Bingbot hat von Ihrem Server einen 403 oder einen 5xx bekommen. Oft blockiert eine Firewall Bingbot. Manchmal ist der Server zu langsam. So erkennen Sie den Unterschied und beheben es.
Wo Sie es sehen
Öffnen Sie in den Bing Webmaster Tools den Site Explorer und wenden Sie den Filter „URLs with crawling issues (server errors)“ an. Laut Bing-Hilfe umfasst er HTTP 403 und 5xx.
Was das bedeutet
Ihr Server hat Bingbot abgewiesen (403) oder nicht antworten können (500 bis 599). Eine Seite, die Bing nicht laden kann, kann es nicht lesen.
Laut Bing-Hilfe zeigt Bing eine Website vielleicht nicht, wenn es sie nicht beständig crawlen kann. Wiederholte Fehler kosten Sie also mehr als die gescheiterten Seiten.
Häufige Ursachen
- Eine Regel in Firewall, CDN oder Bot-Schutz blockiert Bingbot oder prüft ihn und liefert
403. - Ein Sicherheits-Plugin blockiert unbekannte Bots oder sperrt nach Ländern.
- Der Server ist beim Besuch von Bingbot langsam oder überlastet und liefert
500,502,503oder504. - Ein Anfragelimit hält Bingbot für einen Angriff.
- Eine Seite wirft nur bei manchen Anfragen einen Fehler.
So finden Sie die Ursache
- Starten Sie in der URL Inspection den Test Live URL. Scheitert er, während die Seite in Ihrem Browser lädt, behandelt etwas Bingbot anders.
- Öffnen Sie das Ereignisprotokoll Ihrer Firewall oder Ihres CDN. Filtern Sie nach dem User-Agent
bingbotund suchen Sie nach Sperren oder Prüfungen. - Prüfen Sie, ob gesperrte Anfragen wirklich von Bing kamen. Führen Sie eine Reverse-DNS-Abfrage der IP durch: Ein echter Bingbot-Name endet auf
search.msn.com. Oder fügen Sie die IP in den Bing Webmaster Tools unter Verify Bingbot ein. - Sehen Sie in das Fehlerprotokoll Ihres Servers zu den Zeiten der Fehler im Site Explorer.
So beheben Sie es
- Erlauben Sie den bestätigten Bingbot in Firewall, CDN und Sicherheits-Plugin. Prüfen Sie User-Agent und IP zusammen, mit der veröffentlichten IP-Liste von Bing oder einer Reverse-DNS-Prüfung.
- Schalten Sie Ländersperren und Anfragelimits für bestätigte Suchmaschinen-Crawler ab.
- Kommt Ihr Server nicht mit, bremsen Sie Bingbot mit Crawl Control in den Bing Webmaster Tools zu Ihren Stoßzeiten. Sperren Sie ihn nicht.
- Beheben Sie das Code- oder Hosting-Problem hinter jedem
5xx-Fehler. - Starten Sie den Test Live URL erneut und klicken Sie dann für Ihre wichtigsten Seiten auf Request indexing.
Wann Sie es ignorieren können
Bei einem 403 auf Seiten, die privat sein sollen, etwa Admin- oder Kontoseiten. Noch besser: Sperren Sie diese Pfade in der robots.txt, damit Bingbot es gar nicht erst versucht.
Mit CrawlCoach
CrawlCoach meldet Links auf Ihrer Website zu Seiten, die einen Serverfehler liefern. Durch Ihre Firewall testet es Bingbot nicht: Ein Test von unserer Adresse kann nicht zeigen, was der echte Crawler von Bing bekommt, weil eine Firewall auch die Adresse prüfen kann. Dafür nutzen Sie das Protokoll Ihrer Firewall und Verify Bingbot.
Häufige Fragen
Warum funktioniert meine Website im Browser, liefert Bingbot aber 403?
Firewalls und Bot-Regeln behandeln Crawler oft anders als Menschen. Eine Regel, die „Bots“ oder „KI-Crawler“ blockiert, kann auch Bingbot treffen. Suchen Sie im Protokoll Ihrer Firewall nach bingbot und erlauben Sie ihn.
Wie prüfe ich, ob ein Besucher wirklich Bingbot ist?
Führen Sie eine Reverse-DNS-Abfrage seiner IP durch. Der Name sollte auf search.msn.com enden. Fragen Sie dann diesen Namen ab und prüfen Sie, ob dieselbe IP zurückkommt. Das Tool Verify Bingbot von Bing macht das für Sie.
Kann ich Bingbot bremsen, statt ihn zu sperren?
Ja. Stellen Sie mit Crawl Control in den Bing Webmaster Tools für Ihre Stoßzeiten ein langsameres Tempo ein. Eine Zeile Crawl-delay in der robots.txt funktioniert auch, gilt aber zu jeder Stunde gleich und hat Vorrang vor Crawl Control.
Quellen
Geprüft am 8. Oktober 2026. Google ändert die Search Console und die Hilfe ab und zu. Sieht etwas auf Ihrem Bildschirm anders aus, sehen Sie in der Quelle nach.
- Hilfe zu den Bing Webmaster Tools: Site Explorer (auf Englisch)
- Hilfe zu den Bing Webmaster Tools: Why is my site not in the index? (auf Englisch)
- Hilfe zu den Bing Webmaster Tools: Verifying Bingbot (auf Englisch)
- Bing: IP-Adressen von Bingbot (JSON) (auf Englisch)
- Hilfe zu den Bing Webmaster Tools: Crawl control (auf Englisch)
Sehen Sie, welche Seiten Ihrer Website bei Google fehlen
Melden Sie sich mit Google an. CrawlCoach prüft bis zu 500 Seiten kostenlos und zeigt für jedes Problem die Lösung.
Kostenlosen Bericht holenKostenlos für bis zu 500 Seiten. Keine Kreditkarte nötig. Melden Sie sich mit dem Google-Konto an, das Sie für die Search Console nutzen.
Die App und die Berichte von CrawlCoach sind auf Englisch.