ClaudeBot
Robot d'Anthropic qui collecte des données d'entraînement pour les modèles Claude. Distinct de Claude-User (fetch à la demande d'un utilisateur) et de Claude-SearchBot (indexation pour la recherche).
- Opérateur
- Anthropic
- User-agent
-
ClaudeBot - Token robots.txt
ClaudeBot- Respecte robots.txt
- Oui
robots.txt
Respecte robots.txt, y compris la directive non standard Crawl-delay. Chaque robot Anthropic a son propre token : cibler ClaudeBot pour ne bloquer que l'entraînement.
Vérifier l'authenticité
Aucune méthode officielle (UA seul)
Anthropic ne publie pas de plages d'IP et ses robots utilisent des IP de cloud public : le filtrage par IP est peu fiable et peut même bloquer l'accès à robots.txt. La maîtrise passe par robots.txt sur le token ClaudeBot plutôt que par une liste d'IP.
Recommandation SEO
Bloquer par défaut
À bloquer par défaut, comme les autres scrapers d'entraînement, sauf stratégie assumée de contribution aux LLM. Bloquer ClaudeBot n'empêche pas Claude-User de récupérer une page à la demande explicite d'un utilisateur.
À savoir
ClaudeBot a remplacé les anciens tokens anthropic-ai et Claude-Web. Anthropic a formalisé ses trois robots (ClaudeBot, Claude-User, Claude-SearchBot) dans sa documentation.
Sources officielles
Fiche mise à jour le 30 septembre 2026