Te cita en respuestas
Claude-SearchBot: qué es y cómo dejarlo entrar o bloquearlo
Si lo bloqueas, Claude Search no puede leer tu web cuando alguien pregunta por lo que haces, y no te citará. Para aparecer en respuestas, déjalo entrar.
Qué es
Claude Search. Indexa la web para las búsquedas de Claude.
Como la mayoría de rastreadores de IA, lee el HTML tal como lo manda tu servidor: lo que tu web pinta con JavaScript puede no llegarle nunca.
Cómo se identifica
Mozilla/5.0 (compatible; Claude-SearchBot/1.0; +claudebot@anthropic.com)
Es lo que manda en la cabecera User-Agent. En robots.txt se usa solo el nombre corto: Claude-SearchBot.
Las líneas para tu robots.txt
Dejarlo entrar
User-agent: Claude-SearchBot Allow: /
Bloquearlo
User-agent: Claude-SearchBot Disallow: /