Te cita en respuestas
OAI-SearchBot: qué es y cómo dejarlo entrar o bloquearlo
Si lo bloqueas, ChatGPT Search no puede leer tu web cuando alguien pregunta por lo que haces, y no te citará. Para aparecer en respuestas, déjalo entrar.
Qué es
ChatGPT Search. Indexa la web para las búsquedas de ChatGPT. Sin él, ChatGPT no te enlaza como fuente.
Como la mayoría de rastreadores de IA, lee el HTML tal como lo manda tu servidor: lo que tu web pinta con JavaScript puede no llegarle nunca.
Cómo se identifica
Mozilla/5.0 (compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot)
Es lo que manda en la cabecera User-Agent. En robots.txt se usa solo el nombre corto: OAI-SearchBot.
Las líneas para tu robots.txt
Dejarlo entrar
User-agent: OAI-SearchBot Allow: /
Bloquearlo
User-agent: OAI-SearchBot Disallow: /