Empfiehlt ChatGPT dein Unternehmen? So testest du es selbst

1. Was du am Ende hast

Du stellst ChatGPT die Fragen, die deine Kunden stellen, wenn sie einen Anbieter suchen. Jede dreimal, jedes Mal in einem neuen Chat. Eine zweite KI hilft dir als Testleiter: Sie formuliert die Fragen mit dir und zählt danach aus, was in den neun Antworten steht. Am Ende hast du:

• drei Testfragen in den Worten deiner Kunden, zum Wiederverwenden,
• eine Zählung aus neun ChatGPT-Antworten: In wie vielen wirst du genannt, wer wird statt dir genannt, welche Websites zeigt ChatGPT als Quelle,
• pro Frage eine Einordnung: meist genannt, manchmal genannt, nicht genannt,
• höchstens fünf Dinge, die du dir als Nächstes anschaust, jedes mit der Stelle in den Antworten, auf die es sich stützt.

Wichtig vorab: Das Ergebnis ist eine Momentaufnahme. KI-Antworten sind nicht fest. Dieselbe Frage kann morgen andere Namen bringen, und ein anderer Kunde an einem anderen Ort bekommt vielleicht eine andere Antwort. Darum stellst du jede Frage mehrmals, und darum wiederholst du den Test später mit denselben Fragen.

Im Video siehst du, wie unser System diese Fragen regelmäßig an ChatGPT und Perplexity stellt. Diese Anleitung ist die Handversion: dieselbe Idee, mit der ChatGPT-App und einem zweiten KI-Chat.

• Für wen: Inhaber, Selbstständige, Agenturen, Berater und Dienstleister, deren Kunden fragen: „Wen soll ich beauftragen?“ Programmieren musst du nicht können.
• Zeit: Plan dir beim ersten Mal eine ruhige Dreiviertelstunde ein: ein paar Fragen beantworten, neun kurze Test-Chats, die Auswertung lesen.
• Was du brauchst:
  • ChatGPT (chatgpt.com oder die App). Die kostenlose Version reicht: Laut OpenAI-Hilfe kann ChatGPT in der kostenlosen Version im Internet suchen, sogar ohne Anmeldung.
  • einen zweiten KI-Chat als Testleiter, zum Beispiel Claude (claude.ai). Claude gibt es kostenlos; laut Preisseite hat jeder Tarif ein Nutzungslimit, das sich in einem 5-Stunden-Fenster zurücksetzt. Du kannst auch ChatGPT als Testleiter nehmen, dann aber in einem eigenen temporären Chat (Schritt 3).
  • den Namen deines Unternehmens in allen Schreibweisen, die vorkommen (mit und ohne „GmbH“, Kurzform, alter Name), und deine Website-Adresse.
  • optional Perplexity (perplexity.ai), eine KI-Suchmaschine, die zu jeder Antwort ihre Quellen zeigt. Laut Perplexity-Hilfe sind einfache Suchen in der kostenlosen Version „praktisch unbegrenzt“.

2. Schritt für Schritt

Teil A: Den Testleiter einrichten

1. Warum nicht einfach im normalen ChatGPT fragen? ChatGPT kann sich Dinge aus früheren Chats merken (die Funktion heißt „Memory“). Laut OpenAI können gespeicherte Erinnerungen sogar beeinflussen, wonach ChatGPT im Internet sucht. Hast du ChatGPT schon einmal von deiner Firma erzählt, bekommst du vielleicht nicht die Antwort, die ein fremder Kunde bekommt. Deshalb stellst du die Testfragen in Teil B in einem temporären Chat ohne Personalisierung.
2. Öffne den Testleiter-Chat und stell ein, dass deine Eingaben nicht zum Training genutzt werden.
   • Claude: Öffne claude.ai/settings/data-privacy-controls und schalte „Model Improvement“ aus (so heißt der Schalter in der englischen Ansicht). Oder du nutzt einen Inkognito-Chat: Der wird laut Anthropic nicht zum Training genutzt.
   • ChatGPT: auf dein Profil → Einstellungen → „Data controls“ → „Improve the model for everyone“ ausschalten (englische Ansicht).
3. Nimmst du ChatGPT auch als Testleiter, öffne dafür einen temporären Chat ohne Personalisierung (wie in Schritt 7). Ein temporärer Chat legt laut OpenAI keine Erinnerungen an. So erfährt ChatGPT aus dem Testleiter-Gespräch nichts über deine Firma, das später in die Test-Chats rutschen könnte. Lass das Fenster offen: Ein temporärer Chat ist nach dem Verlassen nicht mehr in deinem Verlauf.
4. Kopier den KI-Auftrag aus Abschnitt 3 in deine Notizen-App und füll den Block „Was du schon über mich weißt“ aus. Alles in [ECKIGEN KLAMMERN] ersetzt du durch deine Angaben. Was du nicht weißt, lässt du leer, die KI fragt dann nach. Das Datum brauchst du, weil das Ergebnis nur für diesen Tag gilt.
5. Füge den ganzen Auftrag als erste Nachricht in den Testleiter-Chat ein und beantworte die Fragen. Höchstens sechs, eine nach der anderen. Stichworte reichen.
   • „weiter“ überspringt eine Frage.
   • „fertig“ beendet das Gespräch sofort. Du bekommst die Auswertung mit dem, was bis dahin da ist.
6. Du bekommst drei Testfragen und einen Testplan. Kopier die drei Fragen in deine Notizen. Prüf: Steht dein Firmenname oder deine Website in einer Frage? Dann sag es dem Testleiter, der Test wäre sonst wertlos.

Teil B: Die neun Test-Chats

1. Öffne in ChatGPT einen temporären Chat ohne Personalisierung. Laut OpenAI-Hilfe: neuen Chat öffnen → „Temporary“ wählen → vor der ersten Nachricht „Unpersonalized“ wählen (englische Ansicht). Danach lässt sich das nicht mehr ändern. Ohne Personalisierung nutzt der Chat keine Erinnerungen und keine eigenen Anweisungen.
   • Ohne Konto geht es auch: ein privates Browserfenster, chatgpt.com, nicht anmelden. Laut OpenAI kannst du dann unter „Settings“ ebenfalls „Improve the model for everyone“ ausschalten; das gilt für diesen Browser.
2. Füge Frage 1 wortgleich ein und schick sie ab. Schreib nichts dazu, frag nicht nach. Schalte die Internetsuche nicht extra ein, so fragst du wie jemand, der einfach eine Frage eintippt. Laut OpenAI sucht ChatGPT von selbst im Internet, wenn die Frage davon profitiert.
3. Kopier die ganze Antwort. Zeigt ChatGPT darunter einen Knopf „Sources“ (Quellen), öffne ihn und kopier die Liste der Websites mit. Kopier alles, bevor du den Chat verlässt.
4. Füge die Antwort im Testleiter-Chat ein, mit der Kennung davor: F1-L1: (Frage 1, Lauf 1). Der Testleiter bestätigt mit einer Zeile und sagt dir, welche Kennung als Nächstes dran ist. Fragt er, ob ein ähnlicher Name deine Firma ist, antworte kurz.
5. Neuer temporärer Chat, gleiche Frage: F1-L2, dann F1-L3. Dann Frage 2 (F2-L1 bis F2-L3) und Frage 3 (F3-L1 bis F3-L3). Jedes Mal ein neuer Chat, jedes Mal ohne Personalisierung.
6. Nach der neunten Antwort kommt die Auswertung. Keine Zeit mehr? Schreib „fertig“, dann wertet der Testleiter aus, was da ist, und schreibt dazu, wie viele Läufe pro Frage es waren.

Teil C: Lesen und aufheben

1. Prüf eine Stichprobe: Such dir eine Zeile in der Tabelle „Alle Antworten“ und vergleich sie mit der Antwort, die du eingefügt hast. Stimmt sie nicht, sag es dem Testleiter im selben Chat, er zählt neu.
2. Speicher das Ergebnis mit Datum in einem Dokument, zusammen mit den neun Antworten. Du brauchst beides, wenn du den Test wiederholst (Folge-Auftrag d).
3. Optional: der gleiche Test in Perplexity (Folge-Auftrag a).

Zum Ort: Laut OpenAI kann ChatGPT deinen ungefähren Standort aus deiner Internetverbindung ableiten, und ein VPN (eine Verbindung über einen anderen Ort) kann ihn verändern. Deine Testfragen nennen deshalb die Stadt oder Region immer selbst. Das empfiehlt auch OpenAI, wenn lokale Ergebnisse den falschen Ort zeigen.

4. Folge-Aufträge

Im selben Testleiter-Chat weiterschreiben, dann kennt die KI deine Fragen und Antworten schon.

a) Der gleiche Test in Perplexity Stell dieselben drei Fragen in Perplexity, je dreimal in einem neuen Chat, und füg die Antworten mit den Kennungen P-F1-L1 bis P-F3-L3 ein. Vorher das hier in den Testleiter-Chat:

Ich stelle dieselben drei Fragen jetzt in Perplexity, je dreimal in einem neuen Chat. Die Antworten kommen mit den Kennungen P-F1-L1 bis P-F3-L3. Zähl genau nach denselben Regeln. Danach eine Tabelle: Frage | ChatGPT (x von y) | Perplexity (x von y) | Wer in beiden am häufigsten genannt wird. Erklär Unterschiede nicht mit Vermutungen darüber, wie die beiden Programme arbeiten. Schreib nur, was in den Antworten steht.

b) Was ChatGPT über dich weiß Frag in einem neuen temporären Chat ohne Personalisierung dreimal: „Was weißt du über [FIRMENNAME] in [ORT]? Was bietet die Firma an, und für wen?“ Füg die drei Antworten mit den Kennungen W-L1 bis W-L3 in den Testleiter-Chat ein, dann:

Vergleich diese drei Antworten mit meinen echten Angaben: [WAS DU ANBIETEST, FÜR WEN, SEIT WANN, WO, WIE MAN DICH ERREICHT – NUR FIRMENANGABEN, KEINE KUNDENDATEN]. Mach eine Tabelle: Angabe in der Antwort | Kennung | stimmt / falsch / veraltet / fehlt bei mir. Ergänz nichts aus eigenem Wissen. Bei falschen Angaben schreib dazu, wo ich sie korrigieren kann, und markier Vermutungen mit "zu prüfen".

c) Deine Website gegen die Testfragen prüfen

Hier ist der Text von bis zu drei Seiten meiner Website: [TEXT DER SEITEN, OHNE KUNDENNAMEN]. Prüf für jede meiner drei Testfragen: Beantwortet meine Website sie in einfachen Worten? Antwort: ja / teilweise / nein, mit dem Satz von meiner Website als Beleg. Dann: Was fehlt, damit ein Kunde die Frage auf meiner Seite beantwortet findet? Schreib Textvorschläge mit [PLATZHALTERN] für alles, was du nicht aus meinem Text weißt (Preise, Zahlen, Leistungen). Erfinde keine Angaben über mein Unternehmen. Versprich nicht, dass ChatGPT mich danach nennt. Preise, Bewertungen, Werbeaussagen und Berufsrecht: mit Fachperson klären.

d) Den Test wiederholen und vergleichen (zum Beispiel in vier Wochen, in einem neuen Testleiter-Chat)

Hier ist meine letzte Auswertung vom [DATUM]: [AUSWERTUNG EINFÜGEN]. Ich habe dieselben drei Fragen mit demselben Aufbau noch einmal gestellt, die neuen Antworten kommen gleich mit den Kennungen F1-L1 bis F3-L3. Zähl nach denselben Regeln. Dann eine Vergleichstabelle: Frage | damals (x von y) | heute (x von y) | wer neu genannt wird | wer nicht mehr genannt wird. Schreib dazu: Bei drei Läufen pro Frage ist ein Unterschied von einem Lauf kein Beleg für eine Veränderung. Erklär Unterschiede nicht mit Vermutungen.

e) Die Zählung von einer zweiten KI prüfen lassen Öffne einen neuen Chat und füge das ein:

Du prüfst eine Zählung. Hier sind die Antworten, die ich in ChatGPT bekommen habe, jede mit Kennung: [DIE NEUN ANTWORTEN]. Hier ist die Auswertung einer anderen KI: [AUSWERTUNG]. Mein Unternehmen heißt [NAME UND SCHREIBWEISEN], meine Website: [WEBSITE].
Zähl selbst nach: Wo werde ich genannt? Wo steht nur meine Website als Quelle (das zählt nicht als genannt)? Welche anderen Anbieter und Websites kommen wie oft vor?
Gib mir eine Liste jeder Abweichung mit Kennung. Steht etwas in der Auswertung, das in keiner Antwort vorkommt, nenn es zuerst. Erfinde nichts dazu.

5. Beispiel: so sieht das aus

ERFUNDENES BEISPIEL. Das Steuerbüro, die Stadt, alle Firmen und Websites gibt es nicht. Auch die neun „ChatGPT-Antworten“ sind nicht echt: Wir haben sie selbst als Testmaterial geschrieben, damit wir vorher wussten, was richtig gezählt wäre.

Der ausgefüllte Block:

- Name meines Unternehmens und andere Schreibweisen: Steuerbüro Hofmeister, auch „Kanzlei Hofmeister“ und „Hofmeister Steuerberatung“
- Meine Website: hofmeister-musterstadt.de
- Was ich anbiete, in den Worten meiner Kunden: Steuerberatung für Selbstständige, Freiberufler und Gründer
- Wo meine Kunden sitzen: Musterstadt und Umgebung
- Konkurrenten, die ich kenne: [NAMEN ODER „WEISS NICHT“]
- Wo ich teste: ChatGPT, temporärer Chat ohne Personalisierung
- Datum des Tests: 15.10.2026

Zwei der neun eingefügten Antworten (erfunden):

F1-L2:
Für Selbstständige in Musterstadt kommen zum Beispiel diese Kanzleien infrage:
- Brandt & Seidel Steuerberater: viele Mandanten aus dem Bereich Freiberufler, gute Bewertungen.
- Steuerkanzlei Muster: transparente Preise, auch Online-Termine möglich.
Achte darauf, ob die Kanzlei digitale Buchhaltung anbietet und wie schnell sie auf Fragen antwortet.
Quellen: branchenbuch-musterstadt.de · bewertungen-musterstadt.de · hofmeister-musterstadt.de

F1-L3:
Hier sind einige Steuerberater in Musterstadt, die für Selbstständige gut passen können:
1. Brandt & Seidel Steuerberater – große Erfahrung mit Gründern und Freiberuflern.
2. Hofmeister & Partner – Beratung für kleine Unternehmen.
3. Kanzlei Beispiel – persönliche Betreuung, auch Hausbesuche.
Quellen: musterstadt-anzeiger.de

In F1-L2 steht die Website des Steuerbüros bei den Quellen, der Name aber nicht im Text: Das ist „nur Quelle“. In F1-L3 steht ein ähnlicher Name, der nicht das Steuerbüro ist. Der Testleiter hat nachgefragt („Ist ‚Hofmeister & Partner‘ dein Unternehmen?“) und ihn erst nach dem „Nein“ als anderen Anbieter gezählt.

Auszug aus der Auswertung. So kam es in unserem Testlauf mit Claude am 15.10.2026 heraus. Die Antworten der erfundenen Inhaberin hat eine zweite KI gegeben, nach einem Steckbrief. Nach drei Gesprächsfragen, dem Vorschlag der Testfragen und neun eingefügten Antworten kam diese Auswertung. Gekürzt, sonst unverändert. Die richtige Zählung kannten wir vorher: 3 von 9 genannt, 1 × nur Quelle. Die Auswertung kam auf genau das.

Momentaufnahme vom 15.10.2026, getestet in ChatGPT (temporärer Chat ohne Personalisierung), 9 Antworten ausgewertet. Dieselbe Frage kann morgen andere Namen bringen.

1. Deine drei Testfragen

• F1: „Ich bin seit Kurzem selbstständig und brauche jemanden für die Steuer. Wen empfiehlst du mir in Musterstadt, mit fairem Preis und schnellen Antworten?"
• F2: „Was kostet ein Steuerberater für eine EÜR als Selbstständiger in Musterstadt ungefähr, und wo frage ich an?"
• F3: „Ich bin selbstständig in Musterstadt. Worauf achte ich bei der Wahl eines Steuerberaters, wenn mir Preis, digitale Belege und schnelle Antworten wichtig sind, und welche Anbieter passen?"

2. Alle Antworten

3. Ergebnis pro Frage

Insgesamt genannt: 3 von 9 Antworten. Nur als Quelle: 1 (F1-L2).

(Abschnitte 4 und 5 gekürzt: Brandt & Seidel in 6 von 9 Antworten, Steuerkanzlei Muster in 5; häufigste Quelle branchenbuch-musterstadt.de in 4 Antworten.)

6. Was du dir als Nächstes anschaust

1. Kostenfrage: Bei F2 wirst du in keinem Lauf genannt (F2-L1 bis F2-L3). Steuerkanzlei Muster wird in F2-L2 und F2-L3 mit Preisen auf der Website beschrieben. Prüfe, ob deine Website die Frage „Was kostet eine EÜR (einfache Gewinnermittlung)?" beantwortet, etwa mit Preisspannen oder Paketen.
2. Verzeichnis: branchenbuch-musterstadt.de taucht in 4 Antworten als Quelle auf (F1-L1, F1-L2, F2-L2, F3-L2). Prüfe, ob du dort mit aktuellen Angaben stehst.
3. Nur Quelle: In F1-L2 steht deine Website bei den Quellen, dein Name aber nicht im Text. Prüfe, ob deine Startseite klar sagt, was du anbietest (Steuerberatung für Selbstständige und Gründer) und wo (Musterstadt).

(Punkte 4 und 5 und die Abschnitte 7 und 8 gekürzt.) Letzte Zeile: „Selbstprüfung: alle Punkte erfüllt“.

Was wir danach geändert haben: Punkt 1 schlägt Preise auf der Website vor, ohne „mit Fachperson klären“. Für ein Steuerbüro ist genau das heikel. Deshalb steht diese Regel jetzt ausdrücklich in Abschnitt 6 des Auftrags. Im zweiten Testlauf mit der neuen Fassung kam der Hinweis bei Preisen und Bewertungen.

6. Woran du merkst, dass es funktioniert

• Ganz oben steht die Momentaufnahme mit Datum, und nirgends steht, dass ChatGPT „immer“ so antwortet.
• Jeder Name und jede Website in den Tabellen kommt in einer deiner eingefügten Antworten vor. Deine Stichprobe (Schritt 13) stimmt.
• „Nur Quelle“ steht getrennt und zählt nicht als genannt.
• Jeder Punkt in „Was du dir als Nächstes anschaust“ nennt die Kennungen, auf die er sich stützt, und ist etwas, das du selbst prüfen kannst.

Typische Fehler und was du dann tust:

7. Grenzen und Datenschutz

• Eine Momentaufnahme, kein Dauerzustand. Neun Antworten an einem Tag, von einem Ort aus, mit einem Aufbau. Andere Kunden fragen anders, an anderen Orten, mit eingeschalteten Erinnerungen, und bekommen vielleicht andere Namen. Der Test zeigt dir, was an diesem Tag passiert ist, nicht, was immer passiert.
• Drei Läufe sind wenig. Ein Unterschied von einem Lauf zwischen zwei Tests kann Zufall sein. Vergleiche nur Tests mit denselben Fragen und demselben Aufbau.
• Niemand hier weiß, wie ChatGPT Anbieter auswählt. Der Testleiter darf es auch nicht behaupten. OpenAI schreibt selbst, dass ein Platz in den Suchergebnissen nicht garantiert ist und dass Suchergebnisse und Quellen unvollständig, veraltet oder falsch sein können. Die Hinweise in Abschnitt 6 der Auswertung sind Dinge zum Prüfen, kein Rezept.
• Eine Sache, die OpenAI selbst nennt: Damit eine Website überhaupt in den Suchergebnissen von ChatGPT auftauchen kann, muss sie den Suchroboter von OpenAI zulassen (er heißt „OAI-SearchBot“). Frag die Person, die deine Website betreut, ob das der Fall ist.
• Die Testfragen enthalten keine persönlichen Daten. Sie fragen nach Anbietern, nicht nach Menschen. So soll es bleiben. Was nicht in die Chats gehört:
  • Namen, Adressen, Telefonnummern, E-Mail-Adressen von Kunden oder Mitarbeitern (auch nicht als Beispiel, „wie ein Kunde neulich gefragt hat“)
  • Gesundheitsdaten, Bankdaten, Ausweisnummern, Gehälter
  • Verträge, Passwörter, Zugangsdaten
  • Was unter ein Berufsgeheimnis fällt (zum Beispiel in Steuerberatung, Arztpraxis, Kanzlei)
• Firmennamen in den Antworten sind öffentliche Angaben und dürfen in den Testleiter-Chat. Heißt deine Firma wie du selbst, ist dein Name eine persönliche Angabe über dich. Ob du ihn eingibst, entscheidest du.
• Ergebnisse nicht als Werbung verwenden. „ChatGPT empfiehlt uns vor X“ öffentlich zu schreiben, ist heikel. Ob und wie das erlaubt ist, klärst du mit einer Fachperson. Das ist keine Rechtsberatung.
• Keine gekauften oder geschönten Bewertungen, auch wenn Bewertungsportale in den Quellen auftauchen.