Entraînement seulement

ClaudeBot : ce que c’est et comment l’autoriser ou le bloquer

Le bloquer garde vos textes hors de l’entraînement des futurs modèles, sans vous retirer des réponses : d’autres robots s’en chargent. C’est un choix légitime dans les deux sens.

Vérifiez si ClaudeBot peut lire votre site

Tarsier teste votre site avec ce robot et d’autres robots d’IA et vous dit qui entre, qui n’entre pas et pourquoi.

Ce que c’est

Anthropic ClaudeBot. Collecte des textes pour entraîner les modèles d’Anthropic. Le bloquer ne vous retire pas de Claude.

Comme la plupart des robots d’IA, il lit le HTML tel que votre serveur l’envoie : ce que votre site dessine en JavaScript peut ne jamais lui parvenir.

Comment il s’identifie

Mozilla/5.0 (compatible; ClaudeBot/1.0; +claudebot@anthropic.com)

C’est ce qu’il envoie dans l’en-tête User-Agent. Dans robots.txt, on n’utilise que le nom court : ClaudeBot.

Les lignes pour votre robots.txt

L’autoriser

User-agent: ClaudeBot
Allow: /

Le bloquer

User-agent: ClaudeBot
Disallow: /
Créer le robots.txt complet

Autres robots