Solo addestramento

ClaudeBot: cos’è e come consentirlo o bloccarlo

Bloccarlo tiene i tuoi testi fuori dall’addestramento dei modelli futuri, ma non ti toglie dalle risposte: se ne occupano altri bot. È una scelta legittima in entrambi i sensi.

Controlla se ClaudeBot può leggere il tuo sito

Tarsier prova il tuo sito con questo e altri crawler di IA e ti dice chi entra, chi no e perché.

Cos’è

Anthropic ClaudeBot. Raccoglie testi per addestrare i modelli di Anthropic. Bloccarlo non ti toglie da Claude.

Come la maggior parte dei crawler di IA, legge l’HTML così come lo invia il tuo server: ciò che il tuo sito disegna con JavaScript potrebbe non arrivargli mai.

Come si identifica

Mozilla/5.0 (compatible; ClaudeBot/1.0; +claudebot@anthropic.com)

È ciò che invia nell’intestazione User-Agent. In robots.txt si usa solo il nome breve: ClaudeBot.

Le righe per il tuo robots.txt

Consentirlo

User-agent: ClaudeBot
Allow: /

Bloccarlo

User-agent: ClaudeBot
Disallow: /
Crea il robots.txt completo

Altri crawler