AGS(AI Grading System)는 생성형 AI의 응답에서 브랜드가 얼마나 가시적인지 평가하는 개방형 방법입니다. 각 응답에 대해 여러 심사 모델 패널이 존재 여부, 영향력, 품질을 평가하며, 이를 0에서 100 사이의 단일 점수로 집계합니다.

AGS란?

AGS(AI Grading System)는 ChatGPT, Claude, Gemini, Perplexity 및 기타 AI 도구의 응답에서 브랜드 가시성을 측정하는 평가 시스템입니다. 불투명한 등급이 아니라 개방형 방법입니다: 이해하고, 검증하고, 반박할 수 있습니다. 전체 방법은 AGS 방법론 페이지에 공개되어 있습니다.

세 가지 차원

모든 AI 응답은 세 가지 복합 차원으로 평가되며, 기하 평균으로 결합됩니다:

  • P — 존재(Presence): 브랜드가 인용되는지, 어떤 위치에 있으며, 어느 정도인가? (언급률 참조)
  • I — 영향력(Influence): 언급된 내용이 유용하고 독창적이며 관련성이 있는가?
  • Q — 품질(Quality): 답변이 정확하고 적절한 감정 톤을 유지하는가?

왜 여러 AI 모델의 패널인가요?

AGS는 여러 제공업체에서 선별한 AI 패널에 의존하여 단일 모델이 자기 자신에게 유리하게 작용하는 것을 막습니다. 점수에는 신뢰 구간과 평가자 간 신뢰도 계수가 함께 제공되어 불확실성을 숨기지 않고 표시합니다. 측정의 공인된 한계도 문서화되어 있습니다.

고객이 브랜드명 없이 AI에 물으면 다른 곳이 추천됩니다. 담당 브랜드는 어떤가요?

ChatGPT에 대한 질문에서 답변에 브랜드가 언급되지 않을 때마다, 그 자리에는 경쟁사가 추천됩니다: 6,820개의 실제 AI 답변으로 측정된 결과입니다.