Perplexity-User とは何か、robots.txt で止まらない理由
Perplexity によると、人が質問すると、Perplexity-User が回答のためにページを訪れ、そのページへのリンクを付けることがあります。
何をするか
Perplexity によると、ウェブのクロールや、AI の基盤モデルの学習用のコンテンツ集めには使われません。
ユーザー エージェント
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Perplexity-User/1.0; +https://perplexity.ai/perplexity-user)Perplexity は、これを完全なユーザー エージェント文字列として示しています。
robots.txt
Perplexity によると、取得は人が頼んだものなので、この取得は robots.txt のルールを基本的に無視します。
# 許可する
User-agent: Perplexity-User
Allow: /
# ブロックする(基本的に無視されます)
User-agent: Perplexity-User
Disallow: /ブロックすると失うもの
robots.txt のルールでは止まらないことがあります。ファイアウォールのブロックなら止まりますが、人がページについて聞いたときに、Perplexity がページを読んでリンクすることもできなくなります。
本物か確かめる
リクエストの IP を、Perplexity が公開している Perplexity-User の一覧(https://www.perplexity.com/perplexity-user.json)と照らし合わせます。
ファイアウォールと CDN
Perplexity によると、ファイアウォールで両方のボットを許可する必要があることがあり、ユーザー エージェントと IP を一緒に照合するよう勧めています。Cloudflare を使っているなら、Security Settings > Configure AI bot policies を開き、Search を Allow(ブロックしない)にします。Cloudflare のドキュメントによると、2026 年 9 月 15 日から、Training をブロックすると、検索と学習の両方を行うクローラーもブロックされます。
CrawlCoach でわかること
Perplexity によると robots.txt は基本的に無視されるため、CrawlCoach は Perplexity-User をチェックの対象から外しています。チェックするのは、Perplexity の検索結果を支える PerplexityBot です。
よくある質問
Perplexity-User は robots.txt に従いますか?
Perplexity によると、人がページを頼んだため、robots.txt のルールを基本的に無視します。どうしても止めるなら、ファイアウォールのルールを使います。
PerplexityBot と Perplexity-User の違いは何ですか?
PerplexityBot は Perplexity の検索結果のためにページを探してクロールし、robots.txt を読みます。Perplexity-User は、1 人の質問のためにその場でページを読み込みます。
出典
2026年10月8日 に確認しました。Search Console とヘルプの内容は Google が随時変更します。画面の表示が違う場合は、出典をご確認ください。
Google に載っていないページを確認しましょう
Google アカウントでログインするだけです。CrawlCoach が最大 500 ページを無料でチェックし、問題ごとに直し方を示します。
無料レポートを受け取る500 ページまで無料です。クレジットカードは不要です。Search Console で使っている Google アカウントでログインしてください。
CrawlCoach のアプリとレポートは英語で表示されます。