Lo User-Agent è un'intestazione HTTP inviata da un browser o da un robot a ogni richiesta web, che identifica il software che effettua la richiesta (browser, bot di un motore di ricerca, crawler IA, ecc.).
Cos'è uno User-Agent?
Lo User-Agent è una stringa di caratteri inviata nell'intestazione HTTP di ogni richiesta web. Identifica il software che effettua la richiesta.
User-Agent dei bot IA
Nel contesto del Tracking IA, gli User-Agent sono essenziali per identificare i robot dei motori IA:
GPTBot/1.0— OpenAI (ChatGPT)ClaudeBot/1.0— Anthropic (Claude)PerplexityBot/1.0— Perplexity AIGoogle-Extended— Google (Gemini)CCBot/2.0— Common Crawl (utilizzato da numerosi LLM)Bytespider— ByteDance
Ruolo nel robots.txt
Il file robots.txt utilizza gli User-Agent per autorizzare o bloccare l'accesso dei bot:
User-agent: GPTBot
Disallow: /private/
User-agent: ClaudeBot
Allow: /
Perché è importante?
L'analisi degli User-Agent permette di sapere esattamente quali bot IA visitano il tuo sito, con quale frequenza e quali pagine consultano. È la base del Tracking IA.
Ogni domanda posta a ChatGPT senza il tuo nome nella risposta è un competitor raccomandato al posto tuo — misurato su 6.820 risposte AI reali.