Vous cite dans les réponses
Claude-SearchBot : ce que c’est et comment l’autoriser ou le bloquer
Si vous le bloquez, Claude Search ne peut pas lire votre site quand quelqu’un pose une question sur ce que vous faites, et ne vous citera pas. Pour apparaître dans les réponses, laissez-le entrer.
Ce que c’est
Claude Search. Indexe le Web pour les résultats de recherche de Claude.
Comme la plupart des robots d’IA, il lit le HTML tel que votre serveur l’envoie : ce que votre site dessine en JavaScript peut ne jamais lui parvenir.
Comment il s’identifie
Mozilla/5.0 (compatible; Claude-SearchBot/1.0; +claudebot@anthropic.com)
C’est ce qu’il envoie dans l’en-tête User-Agent. Dans robots.txt, on n’utilise que le nom court : Claude-SearchBot.
Les lignes pour votre robots.txt
L’autoriser
User-agent: Claude-SearchBot Allow: /
Le bloquer
User-agent: Claude-SearchBot Disallow: /