Wie baut man 500 Kauf-Fragen, ohne die Marke in die Antwort zu lenken?

Warum reicht eine Keyword-Liste für KI-Messung nicht?

Ein Suchbegriff bildet eine Eingabe ab, eine Kauf-Frage bildet eine Entscheidungssituation ab. KI-Systeme antworten auf die Situation: Empfehlung, Vergleich, Haltbarkeit, Passform, Beschaffung, Pflege, Preis-Leistung, konkreter Einsatz. Wer nur das Hauptkeyword misst, misst einen Bruchteil dessen, was tatsächlich gefragt wird.

Das gilt umso mehr, seit Google AI Mode eine Anfrage in acht bis zwölf Teilfragen zerlegt. Ein Korpus, der nur die Oberfrage enthält, sieht die Teilfragen nie — und damit auch nicht die Stellen, an denen eine Marke aus der Antwort fällt.

Wie viele Varianten braucht eine Frage?

In dem hier beschriebenen Aufbau enthält jedes der 32 Intent-Cluster 15 bis 16 unterschiedlich formulierte Fragen: Statements, Imperative, W-Fragen und Szenarien. Der Grund ist Robustheit. Ein einzelner Prompt kann eine Marke zufällig begünstigen oder benachteiligen; erst die Streuung über Formulierungen zeigt, ob eine Nennung stabil ist.

Die Zahl ist kein Naturgesetz, sondern ein Kompromiss aus Aussagekraft und Messkosten. Unter etwa zehn Varianten je Cluster wird das Ergebnis wackelig, deutlich darüber steigen die Kosten, ohne dass die Aussage merklich besser wird.

Warum müssen unbranded Fragen getrennt ausgewertet werden?

Wer die eigene Marke in die Frage schreibt, bekommt sie meist auch in der Antwort. Das misst nichts. Interessant ist die Frage ohne Markennennung: Wird die Marke aus eigener Relevanz genannt, oder nur, weil sie schon in der Eingabe stand?

In dem beschriebenen Korpus sind 75,4 Prozent der Fragen unbranded. Marken- und Wettbewerbsfragen laufen getrennt mit, weil sie eine andere Frage beantworten: nicht ob man vorkommt, sondern wie man im direkten Vergleich dasteht.

Wozu eine feste Benchmark-Stichprobe?

KI-Antworten schwanken nach System, Modellversion, Region und Zeitpunkt. Wenn sich zwischen zwei Messläufen sowohl der Korpus als auch das Modell ändert, lässt sich eine Veränderung niemandem mehr zuordnen.

Deshalb laufen elf Kernfragen in jedem Messlauf identisch mit. Sie sind der stabile Vergleichspunkt, während der größere Korpus Breite, Personas und unterschiedliche Kaufsituationen abdeckt. Ohne diesen festen Kern ist jede Aussage über Fortschritt eine Vermutung.

1. 1.Entscheidungssituationen sammeln, nicht Suchbegriffe — aus Vertrieb, Support und echten Kundenfragen.
2. 2.Situationen zu Clustern bündeln und je Cluster 15 bis 16 Varianten formulieren.
3. 3.Marken- und unbranded Fragen trennen und getrennt auswerten.
4. 4.Eine kleine feste Stichprobe markieren, die in jedem Lauf unverändert mitläuft.
5. 5.Korpus auf Duplikate prüfen, bevor gemessen wird.
6. 6.Mehrfach messen und erst dann über Veränderung sprechen.

Weitere Guides

Was du sonst noch selbst prüfen kannst.

Kundenstimmen

Was unsere Kunden sagen.

Zitate von Gründern und Geschäftsführern, mit denen wir arbeiten. Wo ein Case vorliegt, steht die Kennzahl daneben.