할루시네이션 URL: AI가 고객사의 웹사이트에 없는 페이지를 만들 때

할루시네이션 URL이란?

할루시네이션 URL은 응답을 생성하는 과정에서 언어 모델(LLM)이 완전히 만들어낸 웹 주소입니다. 모델은 웹 페이지가 실제로 존재하는지 확인할 수 없기에, 그럴듯해 보이지만 고객사의 사이트에 존재하지 않는 URL을 구성합니다. 이 현상은 AI 환각으로 알려져 있으며, 주요 언어 모델 전부에게 예외 없이 영향을 미칩니다.

실제로 사용자가 ChatGPT, Claude, Perplexity에 고객사의 브랜드에 대한 정보를 요청하면, 모델은 해당 페이지가 존재하지 않음에도 yoursite.com/services/strategic-consulting 또는 yoursite.com/enterprise-pricing 같은 URL을 만들어낼 수 있습니다. 이런 링크를 클릭한 사용자는 404 오류 페이지에 도착하게 되며, 이는 고객사의 브랜드 이미지를 훼손하고 놓친 기회가 됩니다.

브랜드에 대한 실제 영향

할루시네이션 URL의 결과는 단순한 기술적 오류를 훨씬 넘어섭니다:

  • AI 트래픽으로 인한 404 오류: 사용자가 존재하지 않는 페이지에 도착하면서 부정적인 경험과 즉각적인 신뢰 상실이 발생합니다. 당사 데이터에 따른 AI 추천 트래픽의 평균 18%가 404 페이지로 이어집니다.
  • 평판 손상: LLM이 만들어낸 URL을 인용하면 사용자들은 고객사의 사이트를 체계적이지 않고, 시대에 뒤처지고, 신뢰할 수 없는 사이트로 인식할 수 있습니다. 이는 구매 의도가 높은 잠재 고객을 주저하게 만들 수 있습니다.
  • 놓친 기회: 각 할루시네이션 URL은 고객사의 사이트가 충족하지 못하는 실제 사용자 니즈를 나타냅니다. LLM이 /enterprise-pricing을 만들어냈다면 그것은 사용자들이 해당 정보를 찾고 있기 때문일 가능성이 높습니다.
  • 네이티브 스코어에 대한 영향: 이런 링크를 따라가 404를 만나는 AI 봇은 고객사의 사이트에 대한 평가를 부정적으로 조정합니다.

모델별 할루시네이션 방식

각 언어 모델은 고유한 URL 할루시네이션 패턴을 보입니다:

GPT-4와 ChatGPT

OpenAI의 모델은 논리적으로 구조화된 URL을 생성하는 경향이 있으며, 고객사의 사이트 탐색 패턴을 그대로 복제하는 경우가 많습니다. 존재하지는 않지만 고객사의 비즈니스와 일관성이 있는 서비스나 제품의 하위 페이지를 자주 만들어냅니다. 관측된 할루시네이션 비율: 인용된 URL의 약 12%.

Claude (Anthropic)

Claude은 일반적으로 URL 생성에 더 신중하여 홈페이지나 일반 페이지로 링크하는 것을 선호합니다. 환각을 일으킬 때는 블로그형 또는 리소스 URL을 만들어내는 경향이 있습니다. 관측된 할루시네이션 비율: 인용된 URL의 약 8%.

Gemini (Google)

Gemini는 Google의 색인에 접근할 수 있어 URL 할루시네이션이 줄어듭니다. 그러나 색인되었지만 이후 삭제된 페이지나 구버전의 URL을 인용할 수 있습니다. 관측된 할루시네이션 비율: 약 6%.

Perplexity

Perplexity는 실시간으로 검색을 수행하여 URL 할루시네이션을 상당히 줄입니다. 그럼에도 유사한 사이트 간의 URL을 혼동하거나 부분적으로만 정확한 URL을 인용할 수 있습니다. 관측된 할루시네이션 비율: 약 4%.

AI Labs Audit가 할루시네이션 URL을 감지하는 방법

할루시네이션 URL 감지는 감사 프로세스에 직접 통합된 핵심 플랫폼 기능입니다:

모델별 추적

각 감사에서 플랫폼은 구조화된 프롬프트로 주요 LLM에 질의합니다. 모든 응답은 언급된 URL 전체를 추출하도록 분석됩니다. 그런 다음 이 URL들은 고객사의 사이트맵과 대조되고 실제 존재 여부를 확인하기 위해 크롤링됩니다.

응답 분석

시스템은 URL의 존재 여부만 확인하는 것이 아닙니다. URL이 인용된 맥락도 분석합니다: 어떤 질문이 할루시네이션을 유발했는지, 어떤 유형의 페이지가 만들어졌는지, 반복되는 패턴이 있는지. 이런 분석을 통해 충족되지 않은 사용자 기대가 드러납니다.

추출 및 분류

할루시네이션 URL은 자동으로 분류됩니다: 서비스 페이지, 제품 페이지, 블로그 게시물, 가격 페이지, 연락처 페이지 등. 이런 분류를 통해 시정 조치의 우선순위를 정하는 데 도움이 됩니다.

대시보드 시각화

AI 트래킹은 할루시네이션 URL을 전용 대시보드에 표시합니다. 다음을 확인할 수 있습니다:

  • 빈도순으로 정렬된 감지된 할루시네이션 URL의 전체 목록
  • 각 URL을 생성한 모델
  • 할루시네이션을 유발한 맥락(프롬프트 또는 질문)
  • 시간에 따른 변화(새로운 할루시네이션, 반복되는 할루시네이션)
  • 처리 상태(미처리, 리디렉션 설정 완료, 페이지 생성 완료)

할루시네이션 URL 대응 방법

감지된 후에는 여러 전략을 활용할 수 있습니다:

301 리디렉션 구현

가장 빠른 해결책은 가장 자주 발생하는 할루시네이션 URL을 가장 관련성 높은 기존 페이지로 리디렉션하는 것입니다. LLM이 /services/complete-audit을 만들어냈다면 고객사의 실제 서비스 페이지로 리디렉션하세요. 이렇게 하면 유실된 트래픽이 즉시 유용한 트래픽으로 바뀝니다.

누락된 페이지 생성

할루시네이션 URL이 정기적으로 반복된다면 그것은 해당 콘텐츠에 대한 실제 수요를 나타냅니다. 풍부하고 GEO 최적화된 콘텐츠로 해당 페이지를 만드세요. 이런 접근법은 할루시네이션을 콘텐츠 기회로 바꿉니다.

패턴 모니터링

할루시네이션 트렌드를 분석하여 수요를 예측하세요. LLM이 체계적으로 비교 페이지, FAQ 또는 가격 페이지를 만들어낸다면 이는 콘텐츠 제작을 위한 강력한 신호입니다. 이런 인사이트를 편집 전략에 통합하세요.

예방 전략

사후 수정을 넘어, 할루시네이션 비율을 낮추는 여러 선제적 전략이 있습니다:

실제 URL 구조 강화

명확하고 논리적이며 설명적인 URL은 LLM이 더 잘 기억하기 때문에 할루시네이션이 발생할 가능성이 낮습니다. 일관되고 예측 가능한 URL 아키텍처를 채택하세요.

사이트맵 최적화

완전하고 최신 상태의 XML 사이트맵은 LLM이 고객사의 사이트 실제 구조를 학습하는 데 도움을 줍니다. 모든 중요 페이지가 풍부한 메타데이터와 함께 포함되어 있는지 확인하세요.

Schema.org 및 구조화 데이터

구조화 데이터는 LLM에게 고객사의 사이트에 대한 정확한 지도를 제공합니다. 구조화 데이터(SiteNavigationElement, WebPage, BreadcrumbList)가 풍부할수록 모델이 고객사의 실제 URL에 대해 갖는 정보가 더 신뢰할 수 있습니다.

llms.txt 파일

llms.txt에는 고객사의 주요 URL을 나열하는 섹션을 포함하여 LLM을 실제 페이지로 명시적으로 안내할 수 있습니다. 자세한 내용은 llms.txt 완전 가이드를 참조하세요.

할루시네이션 비율 통계

당사 플랫폼에서 수백 개의 사이트를 대상으로 수집한 데이터 기준:

  • 첫 번째 감사 중 최소 하나의 할루시네이션 URL이 감지되는 사이트가 74%
  • 브랜드당 모델당 평균 3.2개의 URL이 할루시네이션으로 생성됨
  • 카탈로그의 복잡성 때문에 이커머스 사이트가 가장 크게 영향을 받음(평균 5.7개의 할루시네이션 URL)
  • 시정 후(리디렉션 + 페이지 생성), 3개월 동안 할루시네이션 비율이 평균 61% 하락
  • 리디렉션을 통해 회복된 트래픽은 평균 AI 추천 트래픽 총계의 8%를 차지함

사례 연구 예시

한 경영 컨설팅 회사는 ChatGPT가 체계적으로 /expertise/digital-transformation 페이지를 만들어내고 있다는 것을 발견했습니다. 풍부한 콘텐츠와 전용 쇼케이스 페이지로 해당 페이지를 구축한 결과, 이 회사는 8주 만에 월 200회 이상의 유효 방문을 회복했습니다.
한 B2B SaaS 브랜드는 완전한 AI 트래킹을 통해 4개의 서로 다른 모델이 경쟁사 비교 페이지를 할루시네이션하고 있음을 확인했습니다. 이런 객관적인 비교 페이지를 만든 결과 전체 멘션 비율이 23% 상승했습니다.

감사 생태계와의 통합

할루시네이션 URL 감지는 전체 GEO 전략에 통합됩니다. 완전한 커버리지를 위해 38개 항목 GEO 체크리스트와 결합하고, 예약 감사를 활용하여 시간에 따른 할루시네이션 변화를 모니터링하세요. 경쟁 분석을 통해 고객사의 할루시네이션 비율을 경쟁사와 비교할 수도 있습니다.

저자 소개

Davy Abderrahman

설립자

AI 답변에서의 가시성(AEO/GEO/LLMO) 전문가로서, 대행사와 컨설턴트가 ChatGPT, Claude, Gemini, Perplexity 및 기타 AI 답변 엔진에서 고객이 어떻게 노출되는지 측정하고 분석할 수 있도록 돕습니다.

AEO GEO LLMO AI 가시성 AI 가시성 분석
AI 답변에서 담당 브랜드는 어떻게 소개되나요?

에이전시, 컨설턴트, 사내 팀을 위한 인프라입니다. 직접 만든 시나리오와 선택한 언어 및 모델로 얻은 답변을 비교하세요. 여러분의 시나리오와 전문성을 지원합니다.

이 글이 도움이 되었나요?

- (0 votes)