Une signature de bot IA est un motif de user-agent (et parfois d’adresse IP) qui identifie de manière unique un crawler d’IA générative — GPTBot d’OpenAI, ClaudeBot d’Anthropic, PerplexityBot, Google-Extended, etc. AI Labs Audit maintient un référentiel de 100+ signatures actives mises à jour en continu.

Pourquoi un référentiel dédié ?

Les bots IA évoluent vite : nouveaux acteurs (Mistral-AI-User, ByteDance-Sora), renommages (Anthropic-AI → ClaudeBot puis Claude-Web puis Claude-SearchBot), évolutions de comportement (mode training vs mode search). Sans un référentiel à jour, votre robots.txt et votre WAF risquent soit de bloquer les bons bots, soit d’ignorer ceux qui consomment réellement votre contenu.

Que contient le référentiel AI Labs Audit ?

Pour chaque signature, on trace :

  • L’éditeur (OpenAI, Anthropic, Google, Microsoft, Perplexity, xAI, ByteDance, Common Crawl…) ;
  • Le rôle (training, search, agent, browse) — un même éditeur peut avoir plusieurs bots avec des rôles différents ;
  • Le pattern user-agent à matcher ;
  • Les plages IP officielles (quand elles sont publiées) ;
  • Les recommandations robots.txt (allow / disallow / contextuel) ;
  • L’impact sur la visibilité IA si le bot est bloqué.

Au total, 100+ signatures sont actuellement actives dans le référentiel.

Utilisation côté tracking

Le tracker open source d’AI Labs Audit s’appuie sur ce référentiel pour classer chaque hit reçu sur votre site. Vous obtenez : top des bots les plus actifs, URLs les plus crawlées par chaque bot, corrélation crawl ↔ citation dans vos audits, alertes en cas de pic suspect ou de bot manquant.

Utilisation côté audit GEO

Le score GEO d’un audit pénalise les sites qui bloquent les bots de recherche IA (PerplexityBot, OAI-SearchBot, Claude-SearchBot) car ils sont indispensables pour apparaître dans les réponses IA web-augmentées. À l’inverse, le blocage des bots de training (GPTBot training, Google-Extended training) est neutre voire valorisé pour les marques qui souhaitent protéger leur contenu.

Quand un client interroge les IA sans nommer de marque, quelqu'un d'autre est recommandé. Et les marques que vous pilotez?

Quand votre marque est absente d'une réponse d'IA, un concurrent prend sa place dans 37 % des cas. Données AI Labs Audit : sous-échantillon de l'étude sur 3 002 réponses d'IA.