sitzung

~/geo $ratgeber

Warum empfiehlt ChatGPT meinen Konkurrenten und nicht mich?

Stand: 12.11.2026 · Simon Stühmeier, sentavel

Eine feste Liste, auf der man steht oder nicht, gibt es nicht. Bei derselben Frage nennen ChatGPT, Perplexity und Claude kaum dieselben Betriebe, im Schnitt nur 14 von 100 (am ersten Tag, an den drei weiteren Tagen 15 bis 16). Auch derselbe Dienst nennt an einem anderen Tag oft andere. Als Quelle zeigen die Dienste am häufigsten die Website eines Betriebs. Das zeigt meine Messung mit 432 Fragen.

Ich habe ChatGPT, Perplexity und Claude 36 Fragen gestellt, so wie Kunden einen Handwerker suchen: Heizung, Elektro und Dach, in Frankfurt, Oberursel und Königstein im Taunus. Jede Frage an jeden Dienst, an vier Tagen zwischen dem 7. und 12.11.2026: 36 Fragen mal drei Dienste mal vier Tage sind 432 Antworten. Vorab geplant waren zwei Tage, zwei weitere kamen später dazu, mehr dazu unter „Wie ich gemessen habe“. Die 14 von 100 haben eine Spanne von 9 bis 19, gerechnet über 36 Fragen. Wen ein Kunde genannt bekommt, hängt also stark davon ab, welchen Dienst er fragt.

Die drei Kernzahlen

  • Gleiche Betriebe bei zwei Diensten: █░░░░░░░░░ 14 von 100
  • Gleiche Betriebe am nächsten Tag, selber Dienst: ████░░░░░░ 41 von 100
  • Antworten, die die Website eines Betriebs als Quelle zeigen: ██████████ 97 von 100 (420 von 432)

Die Balken sind auf Zehntel gerundet.

Nennen KI-Assistenten überhaupt Betriebe?

Ja, fast immer. 431 von 432 Antworten nennen mindestens einen Betrieb aus der Region. Claude nennt im Schnitt 5,5 Betriebe je Antwort, ChatGPT 3,0 und Perplexity 2,2.

Nennen die drei Dienste dieselben Betriebe?

Kaum. Zwischen zwei Diensten stimmen die genannten Betriebe bei derselben Frage im Schnitt zu 14 % überein. Gemeint ist der Anteil der gemeinsamen Betriebe: Von 100 Betrieben, die einer der beiden Dienste nannte, nannten beide nur 14. Wer bei ChatGPT vorkommt, kommt bei Claude also oft nicht vor.

Ganz genau ist ein Schnitt aus 36 Fragen nicht. Die übliche Rechnung mit 95 % Sicherheit ergibt, dass er bei ähnlichen Fragen zwischen 9 und 19 % liegen dürfte. Diese Zahl stammt vom ersten Tag, so war es vorab festgelegt. An den drei weiteren Tagen lag sie zwischen 15 und 16 %.

Selbst derselbe Dienst wechselt. Stelle ich die gleiche Frage am nächsten Tag noch einmal, ändert sich viel. Von 100 Betrieben, die an einem der beiden Tage genannt wurden, standen nur 41 an beiden Tagen in der Antwort. Vergleiche ich alle vier Tage paarweise miteinander, sind es im Schnitt 40.

Das bedeutet für Sie: Eine einzelne Frage an eine KI sagt wenig. Werden Sie einmal genannt oder einmal nicht, ist das noch kein verlässliches Bild. Ob Ihr Betrieb genannt wird, sieht man erst, wenn man mehrmals fragt, bei mehreren Diensten, und die Antworten zählt.

Welche Quellen geben die KI-Assistenten an?

Alle 432 Antworten zeigen Quellen, also Seiten, die unter der Antwort als Beleg stehen. In 420 davon ist die Website eines Betriebs dabei. Ob genau dieser Betrieb auch genannt wurde, zählt diese Zahl nicht. Verzeichnisse folgen mit 180 Antworten, Portale und Vermittler mit 137. Ratgeber und Presse kommen in 27 Antworten vor, Listen von Herstellern oder Innungen in 25. Eine Antwort kann mehrere Arten von Quellen zeigen.

Das bedeutet für Sie: Die Website eines Betriebs steht am häufigsten unter den angegebenen Quellen, Einträge in Verzeichnissen folgen. Ob eine klare Seite die Nennung wahrscheinlicher macht, zeigt diese Messung nicht.

Spielt der Ort eine Rolle?

Für die Zahl der genannten Betriebe wenig. In Frankfurt, Oberursel und Königstein nennen die Antworten im Schnitt 3,7, 3,6 und 3,4 Betriebe. Verglichen ist hier nur die Zahl, nicht welche Betriebe es sind. In dieser Messung unterscheidet sich die Zahl stärker nach der Art der Frage. Wer nach den besten Bewertungen fragt, bekommt 4,2 Betriebe genannt, wer heute noch jemanden braucht, nur 2,7.

Wie ich gemessen habe

  • Die 36 Fragen und die Regeln der Auswertung habe ich am 07.11.2026 vor dem ersten Abruf festgelegt und gespeichert. So lassen sich die Fragen nicht nachträglich passend aussuchen.
  • Vier Arten von Fragen, jede für drei Gewerke und drei Orte, das sind 36. Im Wortlaut, die eckigen Klammern sind Platzhalter: „Welchen [Beruf] in [Ort] kannst du empfehlen?“, „Ich möchte in [Ort] [Vorhaben]. Welcher Betrieb ist dafür gut?“, „[Notfall], ich wohne in [Ort]. Wen kann ich heute noch anrufen?“ und „Welcher [Betrieb] in [Ort] hat die besten Bewertungen?“.
  • Eingesetzt habe ich für Heizung: Heizungsbauer, Heizungsbetrieb, „eine Wärmepumpe einbauen lassen“ und „Meine Heizung ist ausgefallen“. Für Elektro: Elektriker, Elektrobetrieb, „eine Wallbox für mein Elektroauto installieren lassen“ und „Bei mir im Haus ist der Strom ausgefallen“. Für Dach: Dachdecker, Dachdeckerbetrieb, „mein Dach sanieren lassen“ und „Nach dem Sturm ist mein Dach undicht“. Als Orte: Frankfurt am Main, Oberursel und Königstein im Taunus. Alle 36 Fragen ausgeschrieben stehen in der Tabelle zum Herunterladen.
  • Jede Frage in einem neuen Gespräch, mit Websuche, Land Deutschland, ohne genauen Standort. Abgefragt über die Schnittstellen der Anbieter, Modelle laut Antwort: gpt-6.1-sol, perplexity/sonar, claude-sonnet-5-5.
  • Lauf 1 am Samstag, 07.11.2026, von 16:25 bis 16:46 Uhr, Lauf 2 am Sonntag, 08.11.2026, von 20:20 bis 20:41 Uhr. Geplant war dieselbe Uhrzeit, der zweite Lauf brach beim ersten Versuch ab und lief deshalb vier Stunden später.
  • Vorab festgelegt waren nur diese zwei Tage. Am 08.11.2026 habe ich zwei weitere Tage dazugenommen, damit verschiedene Wochentage dabei sind: Lauf 3 am Dienstag, 10.11.2026, von 16:25 bis 16:48 Uhr und Lauf 4 am Donnerstag, 12.11.2026, von 16:25 bis 16:50 Uhr. Was nur aus diesen Läufen stammt, nenne ich getrennt.
  • Die Spannen sind per Bootstrap gerechnet: Die 36 Fragen wurden 2.000 Mal mit Zurücklegen neu gezogen.
  • Die Namen der Betriebe hat ein KI-Modell (Claude Haiku) aus den Antworten gezogen, in zwei Durchgängen. Bei 112 von 432 Antworten waren die Durchgänge nicht einig.
  • Geprüft haben das zwei andere KI-Modelle, kein Mensch, ohne das erste Ergebnis zu kennen. Claude Sonnet hat 36 Antworten aus Lauf 1 neu ausgezählt: 151 Namen gleich, fünf Abweichungen. ChatGPT hat eine zweite Stichprobe von 36 Antworten aus Lauf 1 und 2 ausgezählt: 182 Namen gleich, zwei Abweichungen. Für Lauf 3 und 4 gibt es keine eigene Stichprobe.
  • Schreibt eine Antwort einen Betrieb einmal ausführlich und einmal als Kurzform, zählt das als zwei Betriebe. Die 14 % können deshalb etwas zu niedrig sein.

Was die Messung nicht zeigt

  • Ob die genannten Betriebe gut sind, oder ob es sie alle gibt. Namen von Betrieben veröffentliche ich nicht.
  • Gemini und die KI-Antworten der Google-Suche. Für Gemini mit Google-Suche untersagen Googles Bedingungen, die Antworten auszuwerten und zu speichern. Für die KI-Antworten der Suche gibt es keine offizielle Schnittstelle, und das automatische Auslesen der Suchseite ist nicht erlaubt.
  • Andere Regionen, Gewerke und Zeiträume. Es sind drei Gewerke in einer Region an vier Tagen zwischen dem 7. und 12.11.2026, ein Ausschnitt, nicht repräsentativ. Die Dienste ändern sich laufend, in einigen Wochen können die Zahlen anders aussehen.

Andere Messungen haben mit anderen Fragen und Methoden Ähnliches untersucht. SparkToro ließ Marken- und Produktfragen tausendfach wiederholen, dieselbe Liste erschien in weniger als einem von hundert Fällen zweimal. WORTLIGA hat 480 Stadtsuchen in ChatGPT und Googles KI-Modus ausgewertet und vor allem auf die Quellen geschaut. Dort wurde anders gezählt, die Zahlen sind nicht vergleichbar.

Quellen

Alle Zahlen sind eigene Zählungen aus den Antworten. Antworttexte der Dienste gebe ich nicht wieder. ChatGPT, Perplexity und Claude sind Marken ihrer Anbieter, sentavel steht in keiner Verbindung zu ihnen.

Weil schon zwei Dienste so selten dieselben Betriebe nennen, sagt für Ihren Betrieb erst eine Messung über viele Fragen und alle drei Dienste etwas aus. Diese Messung übernehme ich für Sie, und Sie sehen danach, bei wie vielen Fragen und bei welchem Dienst Ihr Betrieb vorkommt. Schreiben Sie mir, dann schicke ich Ihnen ein Angebot.

~/geo $weiter