AGS (AI Grading System) is an open method for scoring brand visibility in generative AI answers. For each answer, a judge from a pool of independent models scores presence, influence and quality, aggregated into a single 0-100 score. A sample is double-scored to measure inter-judge reliability (GRC).
Was ist das AGS?
Das AGS (AI Grading System) ist das Bewertungssystem, das die Sichtbarkeit einer Marke in den Antworten von ChatGPT, Claude, Gemini, Perplexity und anderen KIs misst. Statt einer undurchsichtigen Note handelt es sich um eine offene Methode: Man kann sie verstehen, überprüfen und hinterfragen. Die vollständige Methode ist auf unserer Seite zur AGS-Methodik veröffentlicht.
Die drei Dimensionen
Jede KI-Antwort wird anhand von drei zusammengesetzten Dimensionen bewertet, die über ein geometrisches Mittel kombiniert werden:
- P — Präsenz: Wird die Marke genannt, an welcher Stelle und in welchem Umfang? (siehe Erwähnungsrate)
- I — Einfluss: Ist das Gesagte informativ, einzigartig und relevant?
- Q — Qualität: Ist die Antwort korrekt und vom richtigen Sentiment?
Warum eine Jury aus mehreren KIs?
Das AGS stützt sich auf eine KI-Jury aus verschiedenen Anbietern, um zu verhindern, dass ein Modell sich selbst bevorzugt. Der Wert wird von einem Konfidenzintervall und einem Koeffizienten für die Inter-Judge-Verlässlichkeit begleitet, um die Unsicherheit aufzuzeigen, statt sie zu verbergen. Auch die bewusst benannten Grenzen der Messung sind dokumentiert.
Weiterführendes
Fehlt Ihre Marke in einer KI-Antwort, nimmt ein Konkurrent in 37 % der Fälle ihren Platz ein. AI Labs Audit Daten: Teilstichprobe unserer Studie mit 3 002 KI-Antworten.