Perplexity-User: User-Agent und robots.txt

Perplexity-User lädt eine Seite, wenn eine Person Perplexity eine Frage stellt. Laut Perplexity ignoriert er die robots.txt meist, weil eine Person gefragt hat.

Was Perplexity-User macht

Laut Perplexity besucht Perplexity-User eine Seite, wenn Menschen eine Frage stellen, um bei der Antwort zu helfen, und verlinkt sie dann.

Laut Perplexity dient er nicht zum Crawlen des Webs und nicht zum Sammeln von Inhalten für das Training von KI-Grundmodellen.

User-Agent

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user)

Perplexity nennt das als vollständigen User-Agent.

robots.txt

Laut Perplexity ignoriert dieser Abruf die robots.txt-Regeln meist, weil ein Nutzer ihn angefordert hat.

Erlauben:

User-agent: Perplexity-User
Allow: /

Sperren:

User-agent: Perplexity-User
Disallow: /

Was Sie mit einer Sperre verlieren

Eine robots.txt-Regel hält ihn vielleicht nicht auf. Eine Sperre in der Firewall schon, und dann kann Perplexity Ihre Seite nicht lesen und nicht verlinken, wenn eine Person danach fragt.

Prüfen, ob die Anfrage echt ist

Prüfen Sie die IP der Anfrage gegen die veröffentlichte Liste von Perplexity für Perplexity-User.

IP-Bereiche von Perplexity-User (JSON)

Firewall und Bot-Schutz

Laut Perplexity müssen Sie vielleicht beide Bots in Ihrer Firewall erlauben, mit User-Agent und IP zusammen geprüft.
Nutzen Sie Cloudflare, öffnen Sie Security Settings > Configure AI bot policies und stellen Sie Search auf Allow (do not block). Laut Cloudflare-Dokumentation sperrt seit dem 15. September 2026 das Blockieren von Training auch Crawler, die Suche und Training zugleich erledigen.

Mit CrawlCoach

CrawlCoach lässt Perplexity-User bei seinen Prüfungen aus, weil er laut Perplexity die robots.txt meist ignoriert. Es prüft PerplexityBot, den Crawler hinter den Suchergebnissen von Perplexity.

Häufige Fragen

Hält sich Perplexity-User an die robots.txt?

Laut Perplexity ignoriert er die robots.txt-Regeln meist, weil eine Person nach der Seite gefragt hat. Müssen Sie ihn stoppen, nutzen Sie eine Firewall-Regel.

PerplexityBot oder Perplexity-User: Was ist der Unterschied?

PerplexityBot crawlt, um Seiten für die Suchergebnisse von Perplexity zu finden, und liest die robots.txt. Perplexity-User lädt eine Seite im Moment, für die Frage einer Person.

Quellen

Geprüft am 8. Oktober 2026. Google ändert die Search Console und die Hilfe ab und zu. Sieht etwas auf Ihrem Bildschirm anders aus, sehen Sie in der Quelle nach.

Perplexity: Perplexity Crawlers (auf Englisch)

Perplexity-User: was er ist und warum die robots.txt ihn vielleicht nicht stoppt