アクセス禁止（403）でブロックされたときの対処法

サーバーがページを Google に見せませんでした。多くの場合、ボット対策やファイアウォールが原因です。

Google のヘルプの説明

HTTP 403 は、ユーザーエージェントが認証情報を提供したものの、アクセス権が付与されなかったことを意味します。しかし Googlebot は認証情報を提供しないため、サーバーは間違ってこのエラーを返しています。このページはインデックスに登録されません。

ファイアウォールやボット対策のログで、Googlebot からのリクエストがブロックされていないか探します。
本物の Google のクローラーかどうかを確認し、許可します。Google は、逆引き DNS や公開している IP アドレスの一覧で確認する方法を案内しています。
非公開のページなら、サイトマップから外します。

ユーザーエージェントの名前だけで許可するのは危険です。Googlebot を名乗る悪質なボットもいるため、Google の確認方法を使ってください。

ファイアウォールがまだ Google を拒否していると、検証は不合格になります。混雑時だけブロックするルールや、国ごとのブロックがないかも確認しましょう。

ファイアウォールの設定変更は、多くのページを一度に止めます。CrawlCoach の有料プランはサイトを毎日チェックし、ページが Google から外れたらメールでお知らせします。

よくある原因です。ボット対策の設定で、確認済みのクローラーを許可しているか確認してください。ログで Googlebot へのブロックを探すのが近道です。

おすすめしません。Googlebot を名乗る別のボットも通してしまいます。Google が公開している方法で、本物の Google のクローラーかどうかを確認してから許可しましょう。

2026年10月8日に確認しました。Search Console とヘルプの内容は Google が随時変更します。画面の表示が違う場合は、出典をご確認ください。