AGS(AI Grading System)는 생성형 AI의 응답에서 브랜드가 얼마나 가시적인지 평가하는 개방형 방법입니다. 각 응답에 대해 여러 심사 모델 패널이 존재 여부, 영향력, 품질을 평가하며, 이를 0에서 100 사이의 단일 점수로 집계합니다.
AGS란?
AGS(AI Grading System)는 ChatGPT, Claude, Gemini, Perplexity 및 기타 AI 도구의 응답에서 브랜드 가시성을 측정하는 평가 시스템입니다. 불투명한 등급이 아니라 개방형 방법입니다: 이해하고, 검증하고, 반박할 수 있습니다. 전체 방법은 AGS 방법론 페이지에 공개되어 있습니다.
세 가지 차원
모든 AI 응답은 세 가지 복합 차원으로 평가되며, 기하 평균으로 결합됩니다:
- P — 존재(Presence): 브랜드가 인용되는지, 어떤 위치에 있으며, 어느 정도인가? (언급률 참조)
- I — 영향력(Influence): 언급된 내용이 유용하고 독창적이며 관련성이 있는가?
- Q — 품질(Quality): 답변이 정확하고 적절한 감정 톤을 유지하는가?
왜 여러 AI 모델의 패널인가요?
AGS는 여러 제공업체에서 선별한 AI 패널에 의존하여 단일 모델이 자기 자신에게 유리하게 작용하는 것을 막습니다. 점수에는 신뢰 구간과 평가자 간 신뢰도 계수가 함께 제공되어 불확실성을 숨기지 않고 표시합니다. 측정의 공인된 한계도 문서화되어 있습니다.
에이전시, 컨설턴트, 사내 팀을 위한 인프라입니다. 직접 만든 시나리오와 선택한 언어 및 모델로 얻은 답변을 비교하세요. 여러분의 시나리오와 전문성을 지원합니다.