ClaudeBot ist der Crawler von Anthropic, der das Web durchsucht, um die Datengrundlage von Claude zu speisen. Er ist am User-Agent „ClaudeBot“ erkennbar und über robots.txt steuerbar.

Was ist ClaudeBot?

ClaudeBot ist der von Anthropic entwickelte Web-Crawler, der Daten zum Trainieren und Versorgen des Claude-Modells sammelt. Wie GPTBot für OpenAI durchsucht ClaudeBot öffentliche Websites und respektiert die Direktiven der robots.txt.

ClaudeBot in Ihren Logs erkennen

ClaudeBot identifiziert sich mit dem User-Agent „ClaudeBot“ in HTTP-Anfragen. AI Labs Audit erkennt seine Besuche automatisch und integriert sie in das Tracking-Dashboard für KI-Bots.

Empfohlene Konfiguration

Um Ihre Sichtbarkeit auf Claude zu maximieren, wird empfohlen, ClaudeBot zuzulassen:

User-agent: ClaudeBot
Allow: /

ClaudeBot und Ihre GEO-Strategie

Das Zulassen von ClaudeBot ist Teil einer umfassenden GEO-Strategie. Je zugänglicher Ihre Inhalte für KI-Crawler sind, desto höher die Chance, in den Antworten zitiert zu werden. AI Labs Audit misst die Korrelation zwischen Crawl-Frequenz und Ihrem Hero Grade für jedes Modell.

Wenn eine KI ohne Markennamen befragt wird, wird jemand anderes empfohlen. Und die Marken, die Sie betreuen?

Jede Frage an ChatGPT, in deren Antwort die Marke fehlt, ist ein Wettbewerber, der an ihrer Stelle empfohlen wird: gemessen an 6.820 echten KI-Antworten.