KI-Monitoring prüfen
Das Monitoring läuft. Nur schaut niemand mehr hinein.
Viele Unternehmen messen ihre Sichtbarkeit in ChatGPT, Perplexity und Google AI Overviews mit einem Prompt-Monitoring-Werkzeug, ohne daraus Maßnahmen abzuleiten. Helmut Rabenlehner, Gründer der WEBU Digital GmbH in Wien, prüft das bestehende Setup, entfernt was keine Entscheidung stützt, und übersetzt die verbleibenden Daten in eine Reihenfolge von Maßnahmen. Preise siehe Preisübersicht.
- Prompt-Auswahl
- Kennzahlen
- Maßnahmenlogik
- Quartalsbericht
- Werkzeug bleibt
Wie es dazu kommt
Der Ablauf ist fast immer derselbe. Das Thema KI-Sichtbarkeit landet auf der Agenda, jemand recherchiert Werkzeuge, eines wird lizenziert. In den ersten Wochen schaut das halbe Marketing täglich hinein. Nach zwei Monaten öffnet es niemand mehr.
Das liegt selten am Werkzeug. Es liegt daran, dass ein Dashboard eine Frage beantwortet, die niemand gestellt hat. Es zeigt, in wie vielen von zweihundert Prompts Ihre Marke vorkommt. Was daraus folgen soll, steht nirgends. Und weil nichts folgt, wird nicht hingeschaut, und weil nicht hingeschaut wird, fällt niemandem auf, dass die Hälfte der Prompts ohnehin nie jemand stellen würde.
Wer dann verlängert, zahlt für ein Messgerät, das in der Lade liegt.
Was ich mir ansehe
- Die Prompts selbst. Der häufigste Fehler ist eine Liste aus Kategoriebegriffen, die klingen wie Keywords. Echte Anfragen sind ausformulierte Sätze mit Branche, Anlass und Vorbehalt. Wer die falschen Prompts misst, misst zuverlässig etwas Belangloses.
- Ob die Prompts zu Ihrem Verkaufsprozess passen. Eine Frage aus der Recherchephase ist etwas anderes als eine Frage mit Budget dahinter. Beide gehören gemessen, aber nicht gleich gewichtet.
- Was gemessen wird und was fehlt. Nennung ist nicht gleich Nennung. Ob Sie in einer Aufzählung an fünfter Stelle stehen oder als Antwort empfohlen werden, macht den Unterschied, und viele Setups unterscheiden das nicht.
- Ob die Darstellung stimmt. Erwähnt zu werden nützt wenig, wenn Standort, Leistungen oder Preise falsch wiedergegeben werden. Das kommt häufiger vor, als die Zahlen im Dashboard vermuten lassen.
- Was die Website dazu beiträgt. Monitoring misst ein Ergebnis. Ob Ihre Inhalte, Ihre strukturierten Daten und Ihre Entität überhaupt geeignet sind, dieses Ergebnis zu erzeugen, misst es nicht.
Was dabei herauskommt
Reduzierte Prompt-Liste
Jeder verbleibende Eintrag ist begründet und einer Phase im Verkaufsprozess zugeordnet. Meist bleibt weniger als ein Viertel übrig.
Zwei bis drei Kennzahlen
Festlegung, was tatsächlich beobachtet wird. Alles andere wird nicht mehr berichtet, weil es keine Entscheidung stützt.
Maßnahmen mit Zuordnung
Eine Reihenfolge, in der bei jeder Maßnahme steht, welche Kennzahl sich bewegen sollte. Sonst bleibt Messen Selbstzweck.
Dazu ein Berichtsformat, das in eine Managementvorlage passt. Wer quartalsweise berichten muss, braucht keine zweihundert Prompts, sondern drei Aussagen, die ein Vorstand versteht.
Ihr bestehendes Werkzeug bleibt in aller Regel im Einsatz. Ich verkaufe keine Software und habe kein Interesse daran, dass Sie wechseln.
Die unbequeme Möglichkeit
Es kommt vor, dass die Empfehlung lautet, das Monitoring zu kündigen. Wenn Ihre Entität in den Grundlagen nicht sauber ist, misst jedes Werkzeug ein Ergebnis, das Sie ohnehin nicht beeinflussen können. Dann ist die Lizenzgebühr in der Arbeit an den Grundlagen besser aufgehoben, und gemessen wird wieder, wenn es etwas zu messen gibt.
Das ist selten die Antwort, die erwartet wird. Es ist aber die einzige, die den Betrag rechtfertigt, den Sie für die Prüfung bezahlen.
Endgültiger Betrag vor Beauftragung. Bei laufender Betreuung des Setups rechnen wir monatlich ab, der Rahmen wird ebenfalls vorher genannt.
Ablauf
Sie geben mir lesenden Zugriff auf Ihr Monitoring-Werkzeug, die Prompt-Liste und die letzten Auswertungen. Dazu ein Gespräch von sechzig Minuten über Ihren Verkaufsprozess, weil sich ohne diese Information nicht beurteilen lässt, welche Prompts zählen.
Keine Garantien. Eine ehrliche Einschätzung.
Ob Ihr Unternehmen in KI-Antworten genannt wird, entscheiden Systeme, deren Auswahl niemand steuert. Was sich beeinflussen lässt, ist die Wahrscheinlichkeit, als Quelle infrage zu kommen. Wer Ihnen eine Nennung zusichert, verkauft Ihnen etwas.
Häufige Fragen
Müssen wir unser Monitoring-Tool wechseln?
In der Regel nicht. Die gängigen Werkzeuge messen ähnlich zuverlässig. Das Problem liegt fast immer bei der Prompt-Auswahl und daran, dass keine Maßnahmen hinterlegt sind, nicht an der Software.
Was soll man tracken: Prompts, Marken oder Keywords?
Prompts, und zwar ausformulierte Fragen, wie sie Kunden tatsächlich stellen. Keywords im klassischen Sinn führen bei KI-Systemen in die Irre. Markennennungen sind eine sinnvolle Ergänzung, aber als alleinige Kennzahl zu grob.
Wie viele Prompts sind sinnvoll?
Deutlich weniger, als die meisten Setups enthalten. Zwanzig gut gewählte Fragen entlang des Verkaufsprozesses sagen mehr aus als zweihundert automatisch erzeugte Varianten, und man liest sie auch tatsächlich.
Wie oft sollte gemessen werden?
Monatlich reicht in den meisten Fällen. KI-Antworten schwanken kurzfristig stark, tägliche Messungen erzeugen Bewegung ohne Aussage. Für Quartalsberichte ist ein monatlicher Rhythmus die brauchbare Grundlage.
Können wir das Setup danach selbst betreuen?
Ja, das ist der Normalfall. Sie erhalten die Prompt-Liste mit Begründung und das Berichtsformat. Eine laufende Betreuung ist möglich, aber nicht erforderlich.