Das AGS (AI Grading System) ist eine offene Methode zur Bewertung der Sichtbarkeit einer Marke in den Antworten generativer KIs. Für jede Antwort beurteilt eine Jury aus mehreren Judge-Modellen die Präsenz, den Einfluss und die Qualität, die zu einem einzigen Wert zwischen 0 und 100 zusammengeführt werden.

Was ist das AGS?

Das AGS (AI Grading System) ist das Bewertungssystem, das die Sichtbarkeit einer Marke in den Antworten von ChatGPT, Claude, Gemini, Perplexity und anderen KIs misst. Statt einer undurchsichtigen Note handelt es sich um eine offene Methode: Man kann sie verstehen, überprüfen und hinterfragen. Die vollständige Methode ist auf unserer Seite zur AGS-Methodik veröffentlicht.

Die drei Dimensionen

Jede KI-Antwort wird anhand von drei zusammengesetzten Dimensionen bewertet, die über ein geometrisches Mittel kombiniert werden:

  • P — Präsenz: Wird die Marke genannt, an welcher Stelle und in welchem Umfang? (siehe Erwähnungsrate)
  • I — Einfluss: Ist das Gesagte informativ, einzigartig und relevant?
  • Q — Qualität: Ist die Antwort korrekt und vom richtigen Sentiment?

Warum eine Jury aus mehreren KIs?

Das AGS stützt sich auf eine KI-Jury aus verschiedenen Anbietern, um zu verhindern, dass ein Modell sich selbst bevorzugt. Der Wert wird von einem Konfidenzintervall und einem Koeffizienten für die Inter-Judge-Verlässlichkeit begleitet, um die Unsicherheit aufzuzeigen, statt sie zu verbergen. Auch die bewusst benannten Grenzen der Messung sind dokumentiert.

Nur 16 % der Marken erscheinen, wenn ihre Kunden die KIs befragen. Ihre?

Jede Frage an ChatGPT ohne Ihren Namen in der Antwort ist ein Wettbewerber, der an Ihrer Stelle empfohlen wird — gemessen an 6 820 echten KI-Antworten.