Messung
Prompt-Monitoring
Kurz gesagt: Prompt-Monitoring ist die wiederkehrende, dokumentierte Abfrage eines festen Fragensets über mehrere KI-Systeme, um Veränderungen der eigenen Sichtbarkeit über die Zeit als Zeitreihe zu erfassen.
Definition: Prompt-Monitoring
Prompt-Monitoring bezeichnet den laufenden Betrieb einer KI-Sichtbarkeitsmessung. Dasselbe Prompt-Set wird in festem Rhythmus, meist monatlich, über dieselben Systeme abgefragt; Antworten, Nennungen und Quellen werden gespeichert und ausgewertet. Im Unterschied zur einmaligen Bestandsaufnahme im Audit entsteht so eine Zeitreihe, an der sich ablesen lässt, ob Maßnahmen wirken. Anbieter wie Peec AI, Otterly.AI oder Profound automatisieren diesen Ablauf, jeweils mit eigenen Definitionen.
Was dahintersteckt
Der Kern des Monitorings ist Wiederholbarkeit. Sprachmodelle antworten nicht deterministisch: Dieselbe Frage liefert unterschiedliche Formulierungen, andere Anbieter und andere Quellen. Das liegt nicht nur an der Temperatur. Thinking Machines Lab hat 2025 gezeigt, dass Inferenz-Schnittstellen selbst bei Temperatur 0 nicht zuverlässig identische Ausgaben liefern, weil die Verarbeitung von der Serverauslastung abhängt. Ein einzelner Screenshot beweist deshalb wenig. Erst mehrere Läufe je Frage und mehrere Messzeitpunkte trennen Trend von Rauschen.
Zur Dokumentation gehören mehr als Treffer: Datum, System, Modell- oder Produktversion, Standort, Anmeldestatus, vollständiger Antworttext, genannte Wettbewerber und die zitierten URLs. Ändert ein Anbieter das Modell hinter seinem Produkt, springen die Werte oft sprunghaft. Ohne Versionsvermerk wirkt das wie ein Erfolg oder Absturz der eigenen Maßnahmen. Die Quellenliste ist häufig der wertvollste Teil, weil sie zeigt, welche Seiten ein System für ein Thema heranzieht.
Für Google gibt es seit Juni 2026 eine Ergänzung aus erster Hand. Der Bericht zur Leistung in generativen KI-Funktionen in der Search Console, seit 31. August 2026 für alle Websites weltweit ausgerollt, zeigt Impressionen deiner URLs in AI Overviews und im AI Mode, aufgeschlüsselt nach Seiten, Ländern, Geräten und Datum. Er ersetzt das Monitoring nicht: Er kennt keine unverlinkten Nennungen, keine Wettbewerber und keine anderen Systeme. Er ist aber die einzige Messung, die nicht auf Stichproben beruht, und damit ein guter Abgleich für die eigenen Google-Werte.
Der häufigste Fehler ist ein bewegliches Messinstrument. Wer das Prompt-Set nach jeder Messung umbaut oder das Tool wechselt, verliert die Vergleichbarkeit. Tools rechnen Sichtbarkeit unterschiedlich, fragen mit eigenen Einstellungen ab und zählen Nennungen nach eigenen Regeln. Ein Wechsel bricht die Zeitreihe. Lege deshalb Kern-Set, Systeme, Rhythmus und Zählregeln schriftlich fest, bevor die erste Messung läuft. Einen dokumentierten Ablauf dafür beschreibt das Prompt-Monitoring der Agentur.
An einem Fall erklärt
Ein Hersteller von Wärmepumpen lässt 35 Fragen monatlich in je drei Läufen über ChatGPT, Perplexity, Gemini und AI Mode abfragen. Nach einem halben Jahr zeigt die Zeitreihe eine klare Bewegung in Perplexity und kaum eine in Gemini. Die Quellenlisten erklären den Unterschied: Perplexity zitiert Fachbeiträge, in denen der Hersteller vorkommt, Gemini stützt sich vor allem auf zwei Branchenportale, in denen er fehlt.
In der Praxis setzen wir das so um: Prompt-Monitoring: KI-Sichtbarkeit laufend messen →
Häufige Fragen zu Prompt-Monitoring
Monatlich oder wöchentlich messen?
Monatlich reicht für die meisten Unternehmen und hält den Aufwand vertretbar. Wöchentlich lohnt sich während einer laufenden PR-Kampagne, nach einem Relaunch oder in sehr dynamischen Märkten. Wichtiger als die Frequenz ist, dass der Rhythmus konstant bleibt.
Brauche ich dafür ein Tool?
Nicht zwingend. Manuell ist es aufwendig, aber machbar und liefert nachvollziehbare Belege. Tools wie Peec AI oder Otterly.AI nehmen die Arbeit ab, rechnen aber mit eigenen Definitionen. Wer wechselt, beginnt faktisch eine neue Zeitreihe.
Reicht nicht der KI-Bericht in der Search Console?
Für Google ist er eine wertvolle Ergänzung, weil er echte Impressionen in AI Overviews und AI Mode zeigt. Er erfasst aber nur verlinkte eigene URLs, keine Wettbewerber und keine anderen Systeme wie ChatGPT oder Perplexity. Das Monitoring deckt genau diese Lücken ab.
Begriffe im Umfeld
Quellen: Thinking Machines Lab: Defeating Nondeterminism in LLM Inference (2025) (Stand September 2026) · Google Search Central: Search Generative AI performance reports in Search Console (Stand September 2026) · Aggarwal et al.: GEO – Generative Engine Optimization (arXiv/KDD 2024) (Stand September 2026)
Definitionen im Glossar sind redaktionell geprüft, ersetzen aber keine Beratung für deinen Einzelfall. Zurück zum Glossar
Wirst du in KI-Antworten genannt?30 Minuten, kostenlos, mit ehrlicher Einschätzung.
Reden wir 30 Minuten darüber
Kostenlos, unverbindlich und mit einer ehrlichen Einschätzung, ob sich GEO bei dir gerade lohnt.