AI Trust Score

Eine Zahl. Sechs Gründe.

Sechs Signale aus den Antworten von KI-Assistenten, in einem Wert von 0 bis 100: wie oft sie Sie nennen, empfehlen, Ihre Quellen zitieren, gut über Sie sprechen, Sie Wettbewerbern vorziehen und konsistent bleiben. Berechnet wird er vom Code, nie von einem Modell.

Der AI Trust Score von Northstar Audio im geschützten Bereich: der Wert mit seinem Intervall und den sechs Dimensionen, aus denen er besteht.
Demodaten · Northstar Audio

Warum eine Zahl

Sechs Messungen. Ein gemeinsamer Bezugspunkt.

Vor einer Entscheidung kann ein Kunde ChatGPT, Gemini, Perplexity, Copilot oder Claude fragen und eine fertige Antwort lesen. Erwähnungen, Empfehlungen, Quellen, Tonalität und Wettbewerber bewegen sich gemeinsam: Sie einzeln zu verfolgen ist langsam, sie Entscheidern zu präsentieren schwierig.

Der Score gibt dem Team einen gemeinsamen Bezugspunkt, mit veröffentlichter Methode und den Details immer einen Klick entfernt. Er ersetzt die Messungen nicht: Er ordnet sie und zeigt, an welchem Signal zuerst gearbeitet werden sollte.

Eine Marketingleiterin zeigt in einem hellen Studio auf ein Diagramm mit sechs farbigen Balken, zwei Kollegen lächeln zustimmend. KI-generierte Szene.
KI-generiertes Bild · Illustrative Szene

Für Entscheider

Ein Wert pro Zeitraum, mit Intervall und Veränderung: lesbar im Meeting und belastbar bei Rückfragen.

Für das Marketing

Die Dimensionen, die am meisten zählen, und jene, die bremsen, mit den Antworten dahinter.

Für alle, die Inhalte schreiben

Die zitierten Quellen und die zu klärenden Aussagen, verknüpft mit den Maßnahmen.

Die sechs Dimensionen

Sechs Signale. Sechs ausgewiesene Gewichte.

Jede Dimension ist ein Verhältnis beobachteter Zählungen, von 0 bis 100, mit eigener Stichprobe. Die Gewichte ergeben zusammen 100 und ändern sich nur mit einer neuen, veröffentlichten Methodenversion.

Autorität misst in Version 1 die Präsenz Ihrer Quellen unter den zitierten; die Qualität des Quellentyps kommt mit einer späteren Version. Präferenz vergleicht Erwähnungen paarweise: 50 bedeutet Gleichstand, unabhängig von der Zahl der Wettbewerber.

Die Dimensionen der Methode, Version 1
Dimension und GewichtWas er beobachtetAuf welcher Basis
Sichtbarkeit · 25 %Wie oft die Antworten Sie nennen.Vollständige, geprüfte Antworten, gemittelt nach Frage und Assistent.
Empfehlungen · 20 %Wie oft sie Sie für das Anliegen der Frage empfehlen.Dieselben Antworten wie bei der Sichtbarkeit.
Autorität · 15 %Wie oft Antworten mit Quellen Ihre Seiten zitieren.Nur Antworten, in denen das Zitat bewertbar ist.
Reputation · 15 %Die Tonalität der Antworten, wenn sie Sie nennen.Positive, neutrale (zur Hälfte gezählt) und negative Erwähnungen.
Präferenz · 15 %Wo Sie gegenüber jedem angegebenen Wettbewerber stehen.Paarweise Vergleiche in denselben Antworten.
Konsistenz · 10 %Wie stabil Ihre Präsenz über Assistenten und Durchläufe bleibt.Nur wo Sie vorkommen: Abwesenheit steckt schon in der Sichtbarkeit.

Wie es berechnet wird

Keine Zahl stammt aus einem Modell.

Das Sprachmodell liest eine Antwort und klassifiziert sie: Nennt sie die Marke, empfiehlt sie sie, zitiert sie eine ihrer Seiten, in welcher Tonalität, neben welchen Wettbewerbern. Ein deterministischer Prüfer kontrolliert jede Klassifizierung am Text, und ein Mensch prüft sie. Den Score berechnet der Code, allein aus diesen Zählungen.

Der Gesamtwert ist die Summe aus Gewicht mal Wert der gemessenen Dimensionen, geteilt durch die Summe ihrer Gewichte. Gleiche Daten, gleiches Ergebnis, auf jeder Maschine.

Von der Antwort zum Score
  1. Fragen des Panels

    Dieselben Fragen an dieselben Assistenten, in jedem Zyklus.

  2. Geprüfte Klassifizierung

    Ein Extraktor klassifiziert, ein deterministischer Prüfer kontrolliert, ein Mensch prüft.

  3. Sechs Verhältnisse

    Jede Dimension mit Zähler, Nenner und Gewicht.

  4. Gesamtwert mit Intervall

    Ein gewichteter Durchschnitt, immer mit Abdeckung und 95-%-Intervall.

Stichprobe und Abdeckung

Unter der Schwelle keine erfundene Null.

Eine Dimension wird nur mit genügend Beobachtungen gemessen. Unter der Schwelle bleibt sie ausgeschlossen und mit Grund ausgewiesen: Sie zählt nicht als null und senkt den Gesamtwert nicht heimlich.

Kachel „Die Stichprobe“ im geschützten Bereich: Fragen, Assistenten, gemessene Zellen, gültige Antworten, ausgeschlossene Antworten mit Grund, Markt, Methodenversion und Abschlussdatum des Zyklus.
Demodaten · Northstar Audio

Mindestens 30 Beobachtungen

Für jede Dimension, dazu eine Mindestzahl an Fragen oder Wettbewerbern: Ein einzelner Fall entscheidet keinen Wert.

Ausgewiesene Abdeckung

Die Summe der gemessenen Gewichte. Der Gesamtwert erscheint nur, wenn die Sichtbarkeit gemessen ist und die Abdeckung mindestens 70 % erreicht.

Das Gewicht dessen, was fehlt

Neben dem Wert der Bereich, den der Gesamtwert hätte, wenn die ausgeschlossenen Dimensionen 0 oder 100 wären.

Unsicherheit

Jeder Wert sagt, wie stark er schwanken kann.

Ein Score ohne Intervall verspricht eine Genauigkeit, die die Stichprobe nicht hat. Deshalb steht neben dem Wert immer das 95-%-Glaubwürdigkeitsintervall, mit ausgewiesener Genauigkeit.

Das Intervall entsteht aus 10.000 Monte-Carlo-Ziehungen mit festem Seed, bei denen Fragen und Assistenten neu gezogen werden: Dasselbe Panel ergibt immer dasselbe Intervall. Liegt die halbe Breite über 15 Punkten, wird der Wert als „jenseits der Genauigkeitsschwelle“ ausgewiesen.

Zwei Beispielintervalle, gelesen mit der Präzisionsschwelle

Derselbe Beispielwert mit zwei verschiedenen Stichproben: Das enge Intervall wird verglichen, das breite wird als über der von der Methode festgelegten Schwelle von 15 Punkten ausgewiesen.

Erfundenes BeispielWert und 95%-IntervallWie man es liest
Großer Fragenkatalog62, zwischen 58 und 66: halbe Breite von 4 Punkten.Präzision innerhalb der Schwelle: Der Wert geht in die Vergleiche ein.
Kleiner Fragenkatalog62, zwischen 44 und 80: halbe Breite von 18 Punkten.Über der Schwelle von 15 Punkten: Der Wert wird als solcher ausgewiesen.
Derselbe Fragenkatalog, erneutDasselbe Intervall, bei jeder neuen Berechnung.Der feste Seed macht die Monte-Carlo-Ziehungen wiederholbar.

Vergleich im Zeitverlauf

Verglichen wird nur bei gleicher Methode.

Jeder Score trägt den Fingerabdruck der Methode, die ihn erzeugt hat: Version, Gewichte, Schwellen, Statistik. Zwei Werte werden nur bei gleichem Fingerabdruck aneinandergereiht; ein Methodenwechsel unterbricht die Reihe, statt eine Veränderung zu erfinden.

Ein Unterschied, keine Ursache

Der Vergleich sagt, wie stark sich der Score verändert hat. Um eine Wirkung zuzuschreiben, braucht es Experimente mit Kontrollgruppe.

Pro Assistent

Dieselbe Berechnung auf den Antworten eines einzelnen Assistenten: kleinere Basen, breitere Intervalle, ausgewiesen.

Neben den Wettbewerbern

Die sechs Dimensionen der Wettbewerber bei denselben Fragen, soweit die Daten es erlauben.

Von der Zahl zur Maßnahme

Was ihn stützt. Was ihn bremst.

Die Dimensionen mit dem größten und dem geringsten Beitrag werden in Punkten gelesen, mit ihrer Basis. Von dort öffnen Sie die Antwort dahinter und bereiten die passende Maßnahme vor: eine Seite klären, eine Quelle gewinnen, eine FAQ schreiben.

Eine Auswertung der Faktoren, vom Punkt zur Maßnahme

Eine Beispielauswertung zu einer fiktiven Marke: die Dimension, die den Score stützt, die, die ihn bremst, die zu öffnende Antwort und die Maßnahme, die daraus folgt.

BerichteBeispieldokument

Faktoren des Scores · Northstar Audio, fiktive Marke

Stützt ihn
Die Sichtbarkeit: Die Marke wird in den meisten gültigen Antworten genannt.
Bremst ihn
Die Autorität: Unter den zitierten Quellen sind Seiten der Marke selten.
Zu öffnende Antwort
Diejenigen, die eine Zeitschrift und ein Forum zitieren, aber nicht das offizielle Datenblatt.
Maßnahme
Das technische Datenblatt vollständig und zitierfähig machen, dann dieselben Fragen wiederholen.

Was er nicht ist

Ein Indikator, kein Urteil.

Es ist ein eigener Indikator mit veröffentlichter Methode. Er fasst zusammen, was die beobachteten Antworten über Sie sagen, in einem Zeitraum, für einen Markt und eine Sprache.

Er liest keine Gedanken von Modellen

Er beobachtet Antworten; was ein Modell „denkt“, misst niemand.

Kein Urteil über das Unternehmen

Weder eine Absatzprognose noch eine Note für seine Produkte.

Keine generierte Zahl

Kein Wert stammt aus einem Sprachmodell: nur geprüfte Zählungen.

Häufige Fragen

Fragen zum AI Trust Score.

Warum der AI Trust Score sechs Dimensionen nutzt, was er wirklich misst, warum eine Dimension fehlen kann und worin er sich vom Sichtbarkeitsindex unterscheidet.

Warum sechs Dimensionen statt eines einzigen Indikators?

Weil genannt werden, empfohlen werden, als Quelle zitiert werden, die Tonalität, der Vergleich mit Wettbewerbern und die Stabilität sich aus unterschiedlichen Gründen verändern. Der Wert von 0 bis 100 fasst sie zusammen, und jede bleibt mit ihrer Basis nachvollziehbar.

Misst er, was ein Modell über meine Marke denkt?

Nein. Niemand kann messen, was ein Modell „denkt“. Der Score fasst beobachtbare Signale in den Antworten zusammen: Erwähnungen, Empfehlungen, Quellen, Tonalität, Vergleiche und Stabilität.

Kann der Score sicher steigen?

Nein. Sie können an Inhalten und Quellen arbeiten und mit derselben Methode messen, was sich ändert. Niemand kann einen Anstieg versprechen.

Warum kann eine Dimension fehlen?

Weil sie die Mindeststichprobe nicht erreicht hat. Sie bleibt ausgeschlossen und ausgewiesen; fällt die Abdeckung unter 70 % der Gewichte, wird kein Gesamtwert berechnet.

Was ist der Unterschied zum Sichtbarkeitsindex?

Der Sichtbarkeitsindex fasst die Präsenz über fünf Kanäle zusammen: KI, Suche, Social, Presse und Reputation. Der AI Trust Score betrachtet nur KI-Antworten und liest darin sechs Dimensionen. Es sind zwei getrennte, separat veröffentlichte Methoden.

Welche Assistenten fließen in die Berechnung ein?

Die Ihres Panels, für den Zeitraum qualifiziert und neben dem Wert ausgewiesen. Jede Kombination aus Frage und Assistent hat dasselbe Gewicht.

Weiterführende Themen

Jede Funktion beantwortet eine bestimmte Frage. Von hier gelangen Sie zu verwandten Funktionen, zur Methodik ihrer Messung und zur Hilfe für den Einsatz im Arbeitsalltag.

AI Trust Score: sechs Signale, ein Wert | TrustInsider