Vous cite dans les réponses
Bingbot : ce que c’est et comment l’autoriser ou le bloquer
Si vous le bloquez, Copilot / Bing (source de nombreuses IA) ne peut pas lire votre site quand quelqu’un pose une question sur ce que vous faites, et ne vous citera pas. Pour apparaître dans les réponses, laissez-le entrer.
Ce que c’est
Copilot / Bing (source de nombreuses IA).
Comme la plupart des robots d’IA, il lit le HTML tel que votre serveur l’envoie : ce que votre site dessine en JavaScript peut ne jamais lui parvenir.
Comment il s’identifie
Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
C’est ce qu’il envoie dans l’en-tête User-Agent. Dans robots.txt, on n’utilise que le nom court : Bingbot.
Les lignes pour votre robots.txt
L’autoriser
User-agent: Bingbot Allow: /
Le bloquer
User-agent: Bingbot Disallow: /