GPTBot es el rastreador de OpenAI que recorre la web para alimentar los datos de ChatGPT. Identificable por el User-Agent «GPTBot/1.0», puede autorizarse o bloquearse mediante robots.txt.

¿Qué es GPTBot?

GPTBot es el agente de exploración web (crawler) desarrollado por OpenAI. Su función es recorrer los sitios web para recopilar datos que se utilizarán para entrenar y alimentar los modelos GPT, en particular ChatGPT. Es identificable en los logs del servidor por su User-Agent «GPTBot/1.0».

¿Hay que autorizar a GPTBot?

La cuestión es estratégica para la visibilidad IA:

  • Autorizar GPTBot: sus contenidos alimentan ChatGPT, aumentando las probabilidades de ser citado en las respuestas. Es la estrategia recomendada para el GEO.
  • Bloquear GPTBot: protege su propiedad intelectual pero reduce su visibilidad en ChatGPT.

Configuración en robots.txt

El control se efectúa mediante el archivo robots.txt:

User-agent: GPTBot
Allow: /        # Autorizar todo el sitio
Disallow: /private/  # Bloquear ciertas secciones

Seguimiento con AI Labs Audit

AI Labs Audit detecta automáticamente las visitas de GPTBot a su sitio mediante el módulo de tracking. Así puede medir la frecuencia de rastreo y correlacionarla con su visibilidad en ChatGPT. Véase también: ClaudeBot, PerplexityBot, Google-Extended.

Cuando un cliente pregunta a las IA sin citar una marca, se recomienda a otro. ¿Y las marcas que gestiona?

Cada pregunta hecha a ChatGPT sin la marca en la respuesta es un competidor recomendado en su lugar: medido sobre 6.820 respuestas reales de IA.