ClaudeBot : ce que fait le robot d'Anthropic, et comment le bloquer
Anthropic dit que ClaudeBot collecte des contenus du web qui pourraient contribuer à entraîner ses modèles d'IA générative. Quand un site bloque ClaudeBot, Anthropic dit que les futurs contenus du site doivent être exclus de ses jeux de données d'entraînement.
En bref
- Rôle : l'entraînement des modèles
- Respecte robots.txt : oui
- Notre conseil : c'est votre choix. Cela ne change rien aux résultats de recherche de Claude.
Ce qu'il fait
Anthropic a deux autres agents : Claude-SearchBot pour la recherche, et Claude-User pour les pages qu'une personne demande à Claude de lire. Chacun a son propre réglage dans robots.txt.
User-agent
La page d'aide d'Anthropic nomme le jeton robots.txt ClaudeBot mais ne publie pas la chaîne user-agent complète. Filtrez sur ClaudeBot dans le user-agent, et vérifiez l'IP avec la liste d'Anthropic.
robots.txt
Anthropic dit que ses robots respectent robots.txt et n'essaient pas de contourner les CAPTCHA.
Anthropic accepte aussi la ligne Crawl-delay, que la plupart des robots ignorent. Utilisez-la pour ralentir ClaudeBot au lieu de le bloquer.
Ajoutez la règle au robots.txt de chaque sous-domaine que vous voulez couvrir.
Pour l'autoriser :
User-agent: ClaudeBot
Allow: /Pour le bloquer :
User-agent: ClaudeBot
Disallow: /Ce que vous perdez en le bloquant
- Vos futures pages sont exclues des données d'entraînement d'Anthropic.
- Les résultats de recherche de Claude dépendent d'un autre réglage, Claude-SearchBot : bloquer ClaudeBot ne vous y cache pas.
Vérifier que c'est bien ClaudeBot
Anthropic publie une seule liste d'IP pour ses robots (voir les sources). Anthropic dit qu'un robot dont l'IP source figure sur cette liste vient d'Anthropic.
Anthropic prévient que bloquer ses IP au lieu d'utiliser robots.txt peut ne pas fonctionner comme refus, car il ne peut alors plus lire votre robots.txt.
Pare-feu et CDN
Une règle de pare-feu qui bloque « Anthropic » ou « Claude » par leur nom peut aussi attraper Claude-SearchBot et Claude-User. Ne bloquez que ClaudeBot si vous voulez seulement arrêter l'entraînement.
Si vous utilisez Cloudflare, ouvrez Security Settings > Configure AI bot policies. Réglez Search sur Allow (ne bloquez pas). La documentation de Cloudflare indique que depuis le 15 septembre 2026, bloquer Training bloque aussi les robots qui font à la fois de la recherche et de l'entraînement.
Avec CrawlCoach
Bloquer ClaudeBot est votre choix : CrawlCoach ne le signale pas. CrawlCoach signale en revanche les règles robots.txt et les refus de pare-feu qui touchent Claude-SearchBot, le robot qu'utilise la recherche de Claude.
Questions fréquentes
Quel est le user-agent de ClaudeBot ?
La page d'aide d'Anthropic donne le jeton ClaudeBot, mais pas de chaîne user-agent complète. Cherchez ClaudeBot dans le user-agent, et confirmez que l'IP figure sur la liste publiée par Anthropic.
Comment bloquer ClaudeBot ?
Ajoutez User-agent: ClaudeBot et Disallow: / au robots.txt de chaque sous-domaine. Anthropic dit que robots.txt est le moyen de refuser. Les blocages par IP peuvent ne pas fonctionner de façon fiable.
Puis-je ralentir ClaudeBot au lieu de le bloquer ?
Oui. Anthropic accepte Crawl-delay. Par exemple : User-agent: ClaudeBot puis Crawl-delay: 1.
Sources
Vérifié le 8 octobre 2026. Google modifie parfois la Search Console et son aide. Si votre écran ne correspond pas, consultez la source.
Découvrez quelles pages de votre site manquent sur Google
Connectez-vous avec Google. CrawlCoach vérifie gratuitement jusqu'à 500 pages et vous montre la correction pour chaque problème.
Obtenir mon rapport gratuitGratuit jusqu'à 500 pages. Sans carte bancaire. Connectez-vous avec le compte Google que vous utilisez pour la Search Console.
L'application et les rapports CrawlCoach sont en anglais.
Autres robots d'IA
- Claude-SearchBotClaude-SearchBot explore des pages pour améliorer les résultats de recherche de Claude. Anthropic dit que le bloquer peut réduire votre visibilité.
- Claude-UserClaude-User visite des pages quand une personne pose une question à Claude. Le bloquer peut réduire votre visibilité dans les recherches que les gens font dans Claude.
- GPTBotGPTBot collecte des pages qui peuvent servir à entraîner les modèles d'OpenAI. Le bloquer ne vous retire pas de la recherche de ChatGPT.
- Google-ExtendedGoogle-Extended est un jeton robots.txt, pas un robot. Il contrôle l'entraînement et l'ancrage de Gemini. Il ne change rien à la recherche Google.