EN
FR
ES
DE
IT
KO
JA
AGS (AI Grading System) is an open method for scoring brand visibility in generative AI answers. For each answer, a judge from a pool of independent models scores presence, influence and quality, aggregated into a single 0-100 score. A sample is double-scored to measure inter-judge reliability (GRC).
Was ist das AGS?
Das AGS (AI Grading System) ist das Bewertungssystem, das die Sichtbarkeit einer Marke in den Antworten von ChatGPT, Claude, Gemini, Perplexity und anderen KIs misst. Statt einer undurchsichtigen Note handelt es sich um eine offene Methode: Man kann sie verstehen, überprüfen und hinterfragen. Die vollständige Methode ist auf unserer Seite zur AGS-Methodik veröffentlicht.
Die drei Dimensionen
Jede KI-Antwort wird anhand von drei zusammengesetzten Dimensionen bewertet, die über ein geometrisches Mittel kombiniert werden:
- P — Präsenz: Wird die Marke genannt, an welcher Stelle und in welchem Umfang? (siehe Erwähnungsrate)
- I — Einfluss: Ist das Gesagte informativ, einzigartig und relevant?
- Q — Qualität: Ist die Antwort korrekt und vom richtigen Sentiment?
Warum eine Jury aus mehreren KIs?
Das AGS stützt sich auf eine KI-Jury aus verschiedenen Anbietern, um zu verhindern, dass ein Modell sich selbst bevorzugt. Der Wert wird von einem Konfidenzintervall und einem Koeffizienten für die Inter-Judge-Verlässlichkeit begleitet, um die Unsicherheit aufzuzeigen, statt sie zu verbergen. Auch die bewusst benannten Grenzen der Messung sind dokumentiert.
Jede Frage an ChatGPT, in deren Antwort die Marke fehlt, ist ein Wettbewerber, der an ihrer Stelle empfohlen wird: gemessen an 6.820 echten KI-Antworten.