Vous cite dans les réponses
OAI-SearchBot : ce que c’est et comment l’autoriser ou le bloquer
Si vous le bloquez, ChatGPT Search ne peut pas lire votre site quand quelqu’un pose une question sur ce que vous faites, et ne vous citera pas. Pour apparaître dans les réponses, laissez-le entrer.
Ce que c’est
ChatGPT Search. Indexe le Web pour la recherche de ChatGPT. Sans lui, ChatGPT ne met pas de lien vers vous parmi ses sources.
Comme la plupart des robots d’IA, il lit le HTML tel que votre serveur l’envoie : ce que votre site dessine en JavaScript peut ne jamais lui parvenir.
Comment il s’identifie
Mozilla/5.0 (compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot)
C’est ce qu’il envoie dans l’en-tête User-Agent. Dans robots.txt, on n’utilise que le nom court : OAI-SearchBot.
Les lignes pour votre robots.txt
L’autoriser
User-agent: OAI-SearchBot Allow: /
Le bloquer
User-agent: OAI-SearchBot Disallow: /