Entraînement seulement
GPTBot : ce que c’est et comment l’autoriser ou le bloquer
Le bloquer garde vos textes hors de l’entraînement des futurs modèles, sans vous retirer des réponses : d’autres robots s’en chargent. C’est un choix légitime dans les deux sens.
Ce que c’est
OpenAI GPTBot. Collecte des textes pour entraîner les modèles d’OpenAI. Le bloquer ne vous retire pas de ChatGPT.
Comme la plupart des robots d’IA, il lit le HTML tel que votre serveur l’envoie : ce que votre site dessine en JavaScript peut ne jamais lui parvenir.
Comment il s’identifie
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.2; +https://openai.com/gptbot)
C’est ce qu’il envoie dans l’en-tête User-Agent. Dans robots.txt, on n’utilise que le nom court : GPTBot.
Les lignes pour votre robots.txt
L’autoriser
User-agent: GPTBot Allow: /
Le bloquer
User-agent: GPTBot Disallow: /