AGS (AI Grading System) is an open method for scoring brand visibility in generative AI answers. For each answer, a judge from a pool of independent models scores presence, influence and quality, aggregated into a single 0-100 score. A sample is double-scored to measure inter-judge reliability (GRC).

Was ist das AGS?

Das AGS (AI Grading System) ist das Bewertungssystem, das die Sichtbarkeit einer Marke in den Antworten von ChatGPT, Claude, Gemini, Perplexity und anderen KIs misst. Statt einer undurchsichtigen Note handelt es sich um eine offene Methode: Man kann sie verstehen, überprüfen und hinterfragen. Die vollständige Methode ist auf unserer Seite zur AGS-Methodik veröffentlicht.

Die drei Dimensionen

Jede KI-Antwort wird anhand von drei zusammengesetzten Dimensionen bewertet, die über ein geometrisches Mittel kombiniert werden:

  • P — Präsenz: Wird die Marke genannt, an welcher Stelle und in welchem Umfang? (siehe Erwähnungsrate)
  • I — Einfluss: Ist das Gesagte informativ, einzigartig und relevant?
  • Q — Qualität: Ist die Antwort korrekt und vom richtigen Sentiment?

Warum eine Jury aus mehreren KIs?

Das AGS stützt sich auf eine KI-Jury aus verschiedenen Anbietern, um zu verhindern, dass ein Modell sich selbst bevorzugt. Der Wert wird von einem Konfidenzintervall und einem Koeffizienten für die Inter-Judge-Verlässlichkeit begleitet, um die Unsicherheit aufzuzeigen, statt sie zu verbergen. Auch die bewusst benannten Grenzen der Messung sind dokumentiert.

Wenn eine KI ohne Markennamen befragt wird, wird jemand anderes empfohlen. Und die Marken, die Sie betreuen?

Fehlt Ihre Marke in einer KI-Antwort, nimmt ein Konkurrent in 37 % der Fälle ihren Platz ein. AI Labs Audit Daten: Teilstichprobe unserer Studie mit 3 002 KI-Antworten.

Weiterlesen

Entdecken Sie unseren ausführlichen Artikel zu diesem Thema

Artikel lesen