AI 기술

Anchor set(컨트롤 패널)

Anchor set은 지속적으로 재측정되는 통제 브랜드 패널입니다. 안정적인 기준을 추적하면 AI 모델 드리프트를 감지하고 고객사의 점수를 보정하여 실제 AI 가시성 변화만을 도출할 수 있습니다.

문제: 모델은 계속 변한다

제공업체가 모델을 업데이트하면 브랜드가 아무 조치도 하지 않았더라도 답변 — 그리고 따라서 점수 — 가 바뀔 수 있습니다. 이것이 모델 드리프트입니다. 이러한 안전장치가 없으면 해당 변동이 브랜드의 성과로 잘못 판단됩니다.

해결책: 컨트롤 패널

Anchor set은 지속적으로 재측정되는 기준 브랜드 그룹입니다. 모든 브랜드가 동시에 같은 방향으로 움직이면 이는 실제 변화가 아니라 모델 드리프트의 신호입니다. 그때 고객사의 점수를 이에 맞게 보정할 수 있습니다.

AGS에서의 활용

AGS는 신호(브랜드의 실제 변화)와 노이즈(모델 드리프트)를 분리하기 위해 anchor set을 사용합니다. 이는 당사 방법론에 문서화된 측정의 한계에 대한 구체적인 대응 중 하나입니다.

AI 답변에서 담당 브랜드는 어떻게 소개되나요?

에이전시, 컨설턴트, 사내 팀을 위한 인프라입니다. 직접 만든 시나리오와 선택한 언어 및 모델로 얻은 답변을 비교하세요. 여러분의 시나리오와 전문성을 지원합니다.