GPTBot è il crawler di OpenAI che scansiona il web per alimentare i dati di ChatGPT. Identificabile tramite lo User-Agent "GPTBot/1.0", può essere autorizzato o bloccato tramite robots.txt.
Cos'è GPTBot?
GPTBot è l'agente di scansione web (crawler) sviluppato da OpenAI. Il suo ruolo è scansionare i siti web per raccogliere dati che verranno utilizzati per addestrare e alimentare i modelli GPT, in particolare ChatGPT. È identificabile nei log del server tramite lo User-Agent "GPTBot/1.0".
Bisogna autorizzare GPTBot?
La domanda è strategica per la visibilità IA:
- Autorizzare GPTBot: i tuoi contenuti alimentano ChatGPT, aumentando le probabilità di essere citato nelle risposte. È la strategia consigliata per il GEO
- Bloccare GPTBot: protegge la tua proprietà intellettuale ma riduce la tua visibilità su ChatGPT
Configurazione in robots.txt
Il controllo avviene tramite il file robots.txt:
User-agent: GPTBot
Allow: / # Autorizza tutto il sito
Disallow: /private/ # Blocca alcune sezioni
Monitoraggio con AI Labs Audit
AI Labs Audit rileva automaticamente le visite di GPTBot sul tuo sito tramite il modulo di tracking. Puoi così misurare la frequenza di scansione e correlarla con la tua visibilità su ChatGPT. Vedi anche: ClaudeBot, PerplexityBot, Google-Extended.
Ogni domanda posta a ChatGPT senza il tuo nome nella risposta è un competitor raccomandato al posto tuo — misurato su 6.820 risposte AI reali.