Wie werden die Kennzahlen bei LLM Pulse berechnet?
Wenn KI-Assistenten wie ChatGPT, Perplexity oder die KI-Suche von Google Fragen zu Themen Ihrer Branche beantworten: Ist dann von Ihnen die Rede? Werden Sie empfohlen? Und wenn Sie erwähnt werden, erscheinen Sie dann in einem guten Licht?
LLM Pulse misst die KI-Sichtbarkeit Ihrer Marke anhand von drei zentralen Kennzahlen: Erwähnungen, Zitierungen und Sentiment. Dieser Leitfaden erklärt, was die einzelnen Kennzahlen bedeuten und wie sie berechnet werden.
Auf einen Blick
| Kennzahl | Was sie misst | Warum sie wichtig ist |
|---|---|---|
| Erwähnungen | Wenn die KI den Namen Ihrer Marke nennt | Markenbekanntheit in KI-Antworten |
| Zitierungen | Wenn die KI Ihre Website als sichtbare Quelle oder als Hintergrundquelle angibt | Sichtbarkeit als Quelle auf KI-Plattformen |
| Sentiment | Wie positiv die KI über Sie spricht | Reputation Ihrer Marke im KI-Ökosystem |
Erwähnungen
Eine Erwähnung liegt vor, wenn der Name Ihrer Marke im Antworttext einer KI vorkommt.
Beispiel
Wenn jemand fragt: „Was sind die besten Tools für Projektmanagement?“, und die KI antwortet:
„Beliebte Optionen sind Asana, Monday.com und Trello. Asana ist besonders für seine Zeitleistenansichten bekannt …“
Asana, Monday.com und Trello haben jeweils eine Erwähnung erhalten.
So werden Erwähnungen erkannt
- Wir suchen nach Ihrem Markennamen und allen Namensvarianten, die Sie hinterlegt haben (z. B. „Coca-Cola“ und „Coke“)
- Wir berücksichtigen beim Abgleich Wortgrenzen, um Fehltreffer zu vermeiden („Apple“ wird innerhalb von „Pineapple“ nicht erkannt)
- Kommt Ihr Markenname nur in einer URL vor, zählt das als Zitierung, nicht als Erwähnung
Kennzahlen zu Erwähnungen in Ihrem Dashboard
- Erwähnungen gesamt: Anzahl der KI-Antworten, in denen Ihre Marke erwähnt wurde
- Erwähnungsrate: Prozentualer Anteil der Antworten, in denen Sie erwähnt werden
- Erwähnungsposition: Position der Erwähnungen in der Antwort auf einen bestimmten Prompt
- Wettbewerbsvergleich: Wie Ihre Erwähnungen im Vergleich zu denen Ihrer Wettbewerber abschneiden
Zitierungen
Eine Zitierung liegt vor, wenn eine KI Ihre Website als sichtbaren Link oder als Verweis auf eine Hintergrundquelle angibt.
Beispiel
„Für SEO-Leitfäden schauen Sie sich Moz (moz.com/learn/seo) und Ahrefs (ahrefs.com/blog) an.“
Hier wurden sowohl Moz als auch Ahrefs zitiert.
So werden Zitierungen erkannt
- Wir extrahieren sichtbare Links und Verweise auf Hintergrundquellen
- Wir gleichen die Domains mit Ihrer Website und denen Ihrer Wettbewerber ab
- Wir filtern Bilder, Favicons und CDN-Links heraus
- Wir erfassen die Position sichtbarer Zitierungen (1., 2., 3. und so weiter)
Warum die Zitierungsposition wichtig ist
Die durchschnittliche Zitierungsposition zeigt, an welcher Stelle sichtbare Zitierungen in der Regel stehen. Zitierungen im Hintergrund haben keine sichtbare Position und fließen nicht in diese Kennzahl ein.
| Position | Wirkung |
|---|---|
| 1. | Höchste Sichtbarkeit und Klickwahrscheinlichkeit |
| 2.-3. | Weiterhin prominent, gute Sichtbarkeit |
| ab 4. | Geringere Sichtbarkeit, unter Umständen muss gescrollt werden |
Kennzahlen zu Zitierungen in Ihrem Dashboard
- Zitierungen gesamt: Alle Zitierungen in den gefilterten KI-Antworten, mehrfach zitierte Seiten eingeschlossen (die erste Karte im Tab „Übersicht“ der Seite „Zitierungen“)
- Antworten mit Zitierung: Anzahl der KI-Antworten, die eine Quelle (Ihre Website oder eine Domain, einen Host oder eine Seite in den Tabellen der Seite „Zitierungen“) mindestens einmal sichtbar oder im Hintergrund zitieren. Eine Antwort, die sie mehrmals zitiert, wird nur einmal gezählt
- Zitierungsrate: Prozentualer Anteil der erfassten Antworten, die Sie zitieren, Hintergrundquellen eingeschlossen
- Durchschnittliche Position: Ihre typische Platzierung über alle sichtbaren Zitierungen hinweg
- Wettbewerbsvergleich: Wie Ihre Zitierungen im Vergleich zu denen Ihrer Wettbewerber abschneiden
Sentiment
Das Sentiment misst den Ton, in dem die KI über Ihre Marke spricht: positiv, neutral oder negativ.
Sie können viele Erwähnungen haben, doch wenn sie negativ sind, ist das ein Problem. Das Sentiment hilft Ihnen, die Qualität Ihrer Sichtbarkeit zu verstehen, nicht nur ihre Menge.
Sentiment-Stufen
| Stufe | Score | Bedeutung |
|---|---|---|
| Sehr positiv | +1,0 | Begeisterte Empfehlung, großes Lob |
| Positiv | +0,5 | Wohlwollende Erwähnung, verhaltene Empfehlung |
| Neutral | 0,0 | Sachlich, weder positiv noch negativ |
| Negativ | -0,5 | Kritisch, nennt Nachteile |
| Sehr negativ | -1,0 | Scharfe Kritik oder Warnungen |
So wird das Sentiment analysiert
Wir analysieren KI-Antworten mit KI. Wird Ihre Marke erwähnt oder zitiert, sendet unser System die Antwort an ein leistungsfähiges Sprachmodell, das Folgendes bewertet:
- Den Gesamtton gegenüber Ihrer Marke
- Konkretes Lob oder konkrete Kritik
- Die wichtigsten Themen, die im Zusammenhang mit Ihrer Marke zur Sprache kommen
So werden Nuancen erkannt, die eine einfache Keyword-Analyse übersehen würde. Ein Beispiel:
„Marke X ist zwar Branchenführer, doch viele empfinden die Preise als unerschwinglich.“
Diese Aussage ist gemischt: positiv (Branchenführer) mit negativen Elementen (Kritik an den Preisen). Unsere Analyse erfasst beide Aspekte.
Kennzahlen zum Sentiment in Ihrem Dashboard
- Sentiment-Verteilung: Aufschlüsselung nach allen fünf Stufen
- Netto-Sentiment: („Positiv“ + „Sehr positiv“) minus („Negativ“ + „Sehr negativ“)
- Sentiment-Trends: Wie sich die Wahrnehmung im Lauf der Zeit verändert
- Wettbewerbsvergleich: Ihr Sentiment im Vergleich zu dem Ihrer Wettbewerber
Erwähnungsrate
Ihre Erwähnungsrate fasst die Erwähnungen in einem einzigen Prozentwert zusammen:
Brand Visibility Score = (Mentions ÷ Total Responses) × 100
Eine Antwort kann mehrere Marken erwähnen. Aus der Summe ihrer Erwähnungsraten lässt sich deshalb keine Rate für „Sonstige“ ableiten.
Eine Erwähnungsrate von 45 % bedeutet, dass Ihre Marke in fast der Hälfte aller für Ihr Unternehmen relevanten Suchanfragen im Tracking erscheint.
AI Visibility Score (positionsgewichtet)
Der AI Visibility Score geht einen Schritt weiter als die Erwähnungsrate: Jede Antwort, in der Ihre Marke vorkommt, bringt Punkte, abhängig von ihrer Position. Eine Erwähnung an erster Stelle bringt 100 Punkte, an zweiter Stelle 50, an dritter 33,3 und so weiter. Da jede Antwort mit einer Erwähnung Punkte hinzufügt, wächst der Score mit dem Volumen: Er ist kein Prozentwert und nicht auf 100 begrenzt, und Werte im Hunderter- oder Tausenderbereich sind bei einem aktiven Projekt normal.
Wenn Sie Ansichten miteinander vergleichen, sollten Sie Folgendes wissen: Verschiedene Seiten aggregieren diesen Score unterschiedlich. Die KPI-Karte in der Übersicht zeigt den Durchschnitt über alle Tage mit Daten im ausgewählten Zeitraum, während die Tabelle in der KI-Modellanalyse sowie die Tabellen „Führende Marken nach Tags“ und „Führende Marken nach Land“ die kumulierte Summe über den gesamten Zeitraum zeigen. Derselbe Zeitraum kann daher zu Recht auf einer Seite eine kleine und auf einer anderen eine deutlich größere Zahl zeigen. Keiner der beiden Werte ist falsch; es sind unterschiedliche Aggregationen derselben Daten. Die Erwähnungsrate ist die Kennzahl in Prozent für einen ausgewählten Zeitraum.
Die API-Zusammenfassung folgt einer eigenen, dokumentierten Aggregation. Für Raten, Positionen, Sentiment und den AI Visibility Score gibt sie den arithmetischen Mittelwert der zurückgegebenen Werte pro Zeitraum aus. Die Übersicht, ihr PDF und die individuellen Berichte berechnen die Gesamtwerte für Erwähnungsrate und Zitierungsrate aus den Summen der ausgewählten Tagesdatensätze. Enthalten die einzelnen Zeiträume unterschiedlich viele Antworten, können sich die Prozentwerte im Dashboard und in der API-Zusammenfassung daher unterscheiden, selbst wenn der ausgewählte Zeitraum und die Filter identisch sind.
Erwähnungsrate in verschiedenen KI-Modellen
Jeder Prompt im Tracking läuft in den fünf zentralen KI-Modellen sowie in allen Add-on-Modellen, die für das Konto aktiviert sind. Die Erwähnungsrate wird zuerst pro Modell berechnet und dann zusammengefasst. Ein starker Wert in einem Modell kann daher einen schwachen Wert in einem anderen verdecken.
Die KI-Modellanalyse schlüsselt das für Sie auf. Dort sehen Sie Ihre Erwähnungsrate für jedes Modell nebeneinander sowie ein Ringdiagramm mit dem Anteil Ihrer Erwähnungen nach Modell. So erkennen Sie, welche Modelle am meisten zu Ihrer Sichtbarkeit beitragen und wo Sie noch Luft nach oben haben.
Kombinationen von Kennzahlen richtig deuten
| Situation | Mögliche Bedeutung |
|---|---|
| Viele Erwähnungen, wenige Zitierungen | Die KI kennt Ihre Marke, verlinkt aber nicht auf Ihre Website |
| Viele Zitierungen, wenige Erwähnungen | Sie werden als Quelle genutzt, aber nicht namentlich empfohlen |
| Hohe Sichtbarkeit, negatives Sentiment | Sie sind bekannt, haben aber Reputationsprobleme |
| Geringe Sichtbarkeit, positives Sentiment | Gute Reputation mit Potenzial für mehr Bekanntheit |
Ihre Daten filtern
Nach KI-Plattform
Verschiedene Plattformen können unterschiedliche Ergebnisse liefern:
- ChatGPT: Dialogbasierter KI-Assistent
- Perplexity: Auf Recherche ausgerichtet, mit vielen Zitierungen
- Google AI Overview (in der deutschen Google-Suche: Übersichten mit KI): KI-Zusammenfassungen in den Suchergebnissen
- Google AI Mode (KI-Modus): Dialogbasiertes Sucherlebnis
Nach Region & Sprache
Ihre Sichtbarkeit kann je nach Region variieren. Filtern Sie nach Land und Sprache, um zu sehen, wie Sie in einzelnen Regionen abschneiden.
Nach Zeitraum
Verfolgen Sie tägliche, wöchentliche oder monatliche Trends, um Fortschritte zu messen und Veränderungen zu erkennen.
Die tägliche Auswertung verwendet das Kalenderdatum nach Madrider Zeit, an dem der Datensatz der Antwort erstellt wurde. Bei API- und MCP-Filtern schließt ein Enddatum ohne Uhrzeit den gesamten Tag nach Madrider Zeit ein; ein expliziter Zeitstempel behält seine genaue Uhrzeit. Zeitreihen zum Sentiment verwenden die gespeicherte Ausführungszeit der Antwort, daher können Datensätze nahe einer Datumsgrenze in unterschiedliche Zeitabschnitte fallen. In wöchentlichen und monatlichen Diagrammen kann bei einem leeren Zeitabschnitt der vorherige Wert fortgeschrieben werden, damit der Verlauf durchgängig bleibt, während ein Zeitabschnitt mit Antworten und einem tatsächlichen Wert von 0 bei 0 bleibt.
Benchmarks
Die Werte unterscheiden sich je nach Branche, als allgemeine Orientierung gilt jedoch:
| Kennzahl | Gut | Sehr gut | Hervorragend |
|---|---|---|---|
| Erwähnungsrate | ab 20 % | ab 40 % | ab 60 % |
| Zitierungsrate | ab 10 % | ab 25 % | ab 40 % |
| Durchschnittliche Position | Top 5 | Top 3 | Platz 1 |
| Netto-Sentiment | +20 % | +40 % | +60 % |
Hinweis: Am aussagekräftigsten sind Benchmarks im Vergleich mit Wettbewerbern aus Ihrer Branche.
Ihre Kennzahlen verbessern
Wenige Erwähnungen?
- Erstellen Sie mehr Inhalte, aus denen KI-Modelle lernen können
- Sorgen Sie für Erwähnungen auf maßgeblichen Branchenseiten
- Verwenden Sie Ihren Markennamen im gesamten Web einheitlich
Wenige Zitierungen?
- Erstellen Sie umfassende, maßgebliche Ressourcen
- Verbessern Sie Ihre technische SEO für eine bessere Auffindbarkeit
- Bauen Sie thematische Autorität in Ihrer Nische auf
Schlechte Zitierungsposition?
- Stärken Sie die Signale für Ihre Expertise
- Erstellen Sie Leitfäden mit Referenzcharakter, die KI-Modelle als Erstes zitieren würden
- Bauen Sie mehr hochwertige Backlinks auf
Negatives Sentiment?
- Prüfen Sie die konkreten Kritikpunkte in Ihrem Dashboard
- Gehen Sie berechtigte Bedenken zu Ihrem Produkt oder Ihrer Dienstleistung an
- Beobachten Sie, ob sich nach Ihren Änderungen Verbesserungen zeigen
