Crawlers

Google-Extended

Google-Extended는 AI 모델(Gemini) 학습에 특화된 Google의 크롤러입니다. 기존 Googlebot과 별개로, robots.txt를 통해 별도로 차단할 수 있습니다.

Google-Extended란 무엇인가?

Google-Extended는 Google의 robots.txt 제어 토큰입니다. 자체 user-agent로 사이트를 방문하는 로봇이 아닙니다: 크롤링은 Googlebot이 수행하며, robots.txt의 “User-agent: Google-Extended” 행은 Google이 여러분의 콘텐츠를 AI 모델 학습에 사용할 수 있는지에 대한 신호일 뿐입니다.

토큰이 선택하게 하는 것

  • 허용: Google이 크롤된 콘텐츠를 AI 모델(Gemini 등)의 학습과 보강에 사용할 수 있습니다.
  • 거부: AI 학습 용도가 제외되며, 고전적인 Google Search 색인에는 영향이 없습니다.

Google-Extended를 차단해도 페이지가 검색 결과에서 사라지지 않습니다. GPTBot, ClaudeBot처럼 사이트에서 실제 탐지되는 HTTP 로봇과 혼동하지 마십시오.

robots.txt 설정

User-agent: Google-Extended
Allow: /

또는 Disallow: /로 콘텐츠의 AI 사용을 거부합니다.

Google-Extended와 AI 가시성

Gemini 답변과 AI Overviews에서의 가시성은 주로 Googlebot이 페이지를 어떻게 찾고, 이해하고, 인용하느냐에 달려 있습니다. 모델 학습은 별개의 문제로, 이 토큰으로 조절합니다. 완전한 전략을 위해서는 탐지 가능한 AI 로봇(GPTBot, ClaudeBot, PerplexityBot)과 그 실시간 추적도 참고하십시오.

출처: 토큰 상태는 Google 공식 문서에서 확인: Google-Extended; 2026년 11월 12일 확인.

AI 답변에서 담당 브랜드는 어떻게 소개되나요?

에이전시, 컨설턴트, 사내 팀을 위한 인프라입니다. 직접 만든 시나리오와 선택한 언어 및 모델로 얻은 답변을 비교하세요. 여러분의 시나리오와 전문성을 지원합니다.

더 알아보기

이 주제에 대한 심층 아티클을 확인해 보세요

아티클 읽기