Google-Extended는 AI 모델(Gemini) 학습에 특화된 Google의 크롤러입니다. 기존 Googlebot과 별개로, robots.txt를 통해 별도로 차단할 수 있습니다.

Google-Extended란?

Google-Extended는 검색 색인에 사용되는 기존 Googlebot과 구별되는 Google의 특정 User-Agent입니다. 이 크롤러의 역할은 Google의 AI 모델, 특히 Gemini(구 Bard)의 학습용 데이터를 수집하는 것입니다. 이렇게 분리되어 있어 사이트 운영자는 기존 검색과 AI에 대한 콘텐츠 접근을 독립적으로 제어할 수 있습니다.

Googlebot과의 차이

  • Googlebot: Google Search 색인을 위해 크롤링(기존 검색 결과)
  • Google-Extended: Google AI 모델 학습을 위해 크롤링(Gemini, AI Overviews)

Google-Extended를 차단해도 기존 Google Search 순위에는 영향이 없습니다.

robots.txt 설정

User-agent: Google-Extended
Allow: /        # AI 가시성을 위해 허용
# 또는
Disallow: /     # AI 학습 차단

권장 전략

Gemini와 AI Overviews에서의 가시성을 극대화하려면 Google-Extended를 허용하는 것이 좋습니다. GPTBot, ClaudeBot, PerplexityBot 허용과 결합하면 주요 AI 모델 전체를 포괄하는 GEO 전략이 완성됩니다.

고객이 브랜드명 없이 AI에 물으면 다른 곳이 추천됩니다. 담당 브랜드는 어떤가요?

ChatGPT에 대한 질문에서 답변에 브랜드가 언급되지 않을 때마다, 그 자리에는 경쟁사가 추천됩니다: 6,820개의 실제 AI 답변으로 측정된 결과입니다.