Stand: 31.10.2026. Viele Menschen stellen ihre Fragen inzwischen direkt in ChatGPT, und wenn die Antwort Informationen aus dem Netz braucht, sucht ChatGPT selbst nach Quellen. Für Website-Betreiber ergeben sich daraus drei handfeste Aufgaben: den richtigen Crawlern Zugang geben, Inhalte so aufbereiten, dass sie als Quelle taugen, und die Besuche aus ChatGPT messen. Dieser Ratgeber geht die drei Aufgaben der Reihe nach durch. Wie die Suche aus Sicht der Nutzer funktioniert, beantwortet unsere FAQ zur Suche in ChatGPT.
Vier Crawler mit verschiedenen Aufgaben
OpenAI betreibt mehrere Bots, jeder mit einem eigenen Zweck. Die Einzelheiten zu zwei davon behandelt der Ratgeber OAI-SearchBot und ChatGPT-User. Hier die Übersicht nach der Dokumentation [1]:
| User-agent | Aufgabe laut OpenAI | Folge einer Sperre |
|---|---|---|
| OAI-SearchBot | zeigt Websites in den Suchergebnissen der Suchfunktionen von ChatGPT | die Website erscheint nicht in Suchantworten, höchstens noch als Navigationslink |
| GPTBot | dient dazu, die generativen Basismodelle nützlicher und sicherer zu machen | Signal, dass die Inhalte nicht für das Training genutzt werden sollen |
| ChatGPT-User | Abrufe, die ein Nutzer auslöst, kein automatisches Crawlen | robots.txt gilt hier unter Umständen nicht |
| OAI-AdsBot | prüft die Sicherheit von Seiten, die als Anzeige in ChatGPT eingereicht wurden | Daten gehen laut OpenAI nicht ins Training |
Für die Sichtbarkeit in der Suche ist OAI-SearchBot entscheidend. OpenAI schreibt wörtlich: "Sites that are opted out of OAI-SearchBot will not be shown in ChatGPT search answers" [1]. Navigationslinks bleiben möglich, die Dokumentation erklärt aber nicht genauer, was darunter fällt [1]. OpenAI empfiehlt ausdrücklich, OAI-SearchBot in der robots.txt zuzulassen [1].
Training und Suche getrennt steuern
Die Einstellungen für die einzelnen Bots hängen nicht voneinander ab. "Each setting is independent of the others", heißt es in der Dokumentation [1]. Sie können also GPTBot sperren und OAI-SearchBot zulassen. Dann erscheint Ihre Website in Suchantworten, während Sie der Nutzung für das Training widersprechen. Lassen Sie beide zu, kann OpenAI die Ergebnisse eines einzigen Abrufs für beide Zwecke verwenden [1].
In der robots.txt sieht das für den häufigsten Wunsch so aus: ein Block "User-agent: OAI-SearchBot" mit "Allow: /" und ein Block "User-agent: GPTBot" mit "Disallow: /". Nach einer Änderung brauchen OpenAIs Systeme laut Dokumentation rund einen Tag, bis sie die neue Einstellung für die Suche berücksichtigen [1]. Vergessen Sie Subdomains nicht. Nach RFC 9309 liegt die Datei im obersten Pfad des jeweiligen Dienstes [5], jede Subdomain braucht also ihre eigene robots.txt. Wer die Regeln für GPTBot ausführlicher braucht, findet sie im Ratgeber GPTBot in der robots.txt.
Zwei Bots der Tabelle verlangen eine eigene Entscheidung. ChatGPT-User ruft Seiten ab, wenn ein Nutzer im Chat eine Handlung auslöst, und crawlt das Netz nicht selbständig [1]. Weil hinter jedem Abruf ein Mensch steht, gelten die Regeln der robots.txt hier unter Umständen nicht [1]. Wer diese Abrufe trotzdem unterbinden will, kann das nach unserer Einschätzung nur auf dem Server oder im CDN tun. OpenAI veröffentlicht dafür eine eigene IP-Liste unter openai.com/chatgpt-user.json [1]. OAI-AdsBot betrifft nur Websites, deren Seiten als Anzeige in ChatGPT eingereicht wurden. Für alle anderen spielt er keine Rolle.
Noch eine Frage offen?
In der gratis Sprechstunde beantworten wir Fragen zu SEO live, jeden ersten Samstag im Monat um 18 Uhr. Oder Sie rufen einfach an.
Echte Bots erkennen
Jeder dieser Crawler meldet sich mit einem eigenen User-agent. Bei OAI-SearchBot enthält er die Angabe "OAI-SearchBot/1.4" und einen Verweis auf openai.com/searchbot, bei GPTBot entsprechend "GPTBot/1.4" [1]. Weil sich jeder Bot beliebig benennen kann, veröffentlicht OpenAI für jeden Crawler eine Liste seiner IP-Adressen als JSON-Datei, etwa unter openai.com/searchbot.json und openai.com/gptbot.json [1]. Mit diesen Listen gleichen Sie im Server-Log ab, ob ein Zugriff wirklich von OpenAI stammt, und können eine Firewall oder ein CDN gezielt einstellen. Wie Sie solche Zugriffe im Log finden, beschreibt KI-Crawler im Server-Log erkennen.
Prüfen Sie dabei auch, ob Ihr Hoster oder ein Schutzdienst KI-Crawler pauschal abweist. Nach unserer Erfahrung ist das eine häufige Ursache, wenn eine Website trotz offener robots.txt nie in ChatGPT auftaucht.
Wie ChatGPT Quellen anzeigt
Die Entwicklerdokumentation der Websuche, die OpenAI für eigene Anwendungen anbietet, beschreibt, wie Zitate dort aufgebaut sind. Für die Oberfläche von ChatGPT selbst gilt sie nicht automatisch. Werden Ergebnisse aus dem Netz Endnutzern gezeigt, müssen die Zitate dort "clearly visible and clickable" sein [2]. Jedes Zitat enthält Adresse, Titel und Position der zitierten Quelle [2]. Daneben gibt es eine Liste aller Adressen, die das Modell für die Antwort herangezogen hat. Sie umfasst laut Dokumentation meist mehr Quellen als die Zitate im Text [2]. Für Sie heißt das: Eine Seite kann gelesen worden sein, ohne im Text als Zitat zu stehen.
Welche Seiten ChatGPT auswählt, legt OpenAI nicht offen. Was sich sagen lässt: Eine Seite, die OAI-SearchBot nicht abrufen darf, steht in Suchantworten nicht zur Wahl [1]. Darüber hinaus gelten die Grundsätze guter Inhalte. Klare Antworten auf konkrete Fragen, erkennbare Verfasser, Belege und aktuelle Angaben helfen jedem System, das Quellen zusammenfasst. Wie Sie solche Antworten formulieren, zeigt Antwortblöcke und Kurzantworten, und Wege zu Nennungen als Marke oder Anbieter beschreibt In ChatGPT genannt werden.
Produkte in ChatGPT
Für Onlinehändler gibt es einen eigenen Weg. OpenAI beschreibt in seiner Commerce-Dokumentation einen strukturierten Produktfeed als Einstieg [3]. Über den Feed soll ChatGPT Produkte korrekt indexieren und mit aktuellem Preis und aktueller Verfügbarkeit anzeigen. Übertragen wird er an einen SFTP-Server, daneben gibt es eine Schnittstelle für Feeds, Produkte und Aktionen [3]. Für den Kauf im Chat beschreibt OpenAI eigene Spezifikationen für Händler und Zahlungsdienstleister [3]. Angaben zu Ländern macht die Übersichtsseite nicht, prüfen Sie die Teilnahmebedingungen deshalb vor dem Aufwand. Mehr zu Feeds für KI-Dienste steht unter Produktfeeds für KI-Einkauf.
Besuche aus ChatGPT messen
Klickt jemand auf eine Quelle in ChatGPT, landet ein Besuch auf Ihrer Website. Ob er in der Webanalyse als solcher erkennbar ist, hängt vom Werkzeug ab. Matomo hat dafür einen eigenen Kanal für KI-Assistenten eingeführt, in der selbst betriebenen Version ab 5.5.0 [4]. Erkannt werden laut Matomo unter anderem ChatGPT, Copilot, Gemini, Claude, Le Chat, Meta AI und Perplexity [4]. Den Bericht finden Sie unter Akquisition, dazu ein Segment für den Kanaltyp "ai" [4]. Ältere Besuche bleiben in dem Kanal, unter dem sie ursprünglich erfasst wurden [4].
Für eine saubere Auswertung lohnt ein Blick auf die Zielseiten. Welche Seiten bekommen Besuche aus ChatGPT, und passen sie zu den Fragen, die Ihre Kunden dort stellen? Werkzeuge zur Messung von KI-Traffic vergleichen wir unter KI-Sichtbarkeits-Tools.
Unsicher, ob Ihre robots.txt OAI-SearchBot durchlässt? Stellen Sie die Frage in der gratis Sprechstunde, dort besprechen wir sie mit Ihnen. Wenn Sie die Arbeit abgeben möchten, beschreibt die Leistung GEO (SEO Agentur und Suchmaschinenoptimierung) den Ablauf.
- Organisation Overview of OpenAI Crawlers. OpenAI. Stand ohne Datum. abgerufen am 31.10.2026
- Organisation Web search. OpenAI API Documentation. Stand ohne Datum. abgerufen am 31.10.2026
- Organisation Agentic Commerce. OpenAI Developers. Stand ohne Datum. abgerufen am 31.10.2026
- Organisation How to track and analyse traffic from AI assistants like ChatGPT in Matomo reports. Matomo. Stand ohne Datum. abgerufen am 31.10.2026
- Gesetz RFC 9309: Robots Exclusion Protocol. IETF (Koster, Illyes, Zeller, Sassman). Stand 09.2022. abgerufen am 31.10.2026
Häufige Fragen
Verschwinde ich aus ChatGPT, wenn ich GPTBot sperre?
Aus den Suchantworten nicht. Dafür ist OAI-SearchBot zuständig. GPTBot betrifft das Training, und OpenAI schreibt, dass die Einstellungen für die Bots unabhängig voneinander sind.
Wie schnell wirkt eine Änderung an der robots.txt bei OpenAI?
OpenAI nennt für die Suchergebnisse rund einen Tag, bis die Systeme eine Änderung berücksichtigen.
Hält sich ChatGPT-User an die robots.txt?
Nicht in jedem Fall. OpenAI schreibt, dass die Regeln für ChatGPT-User unter Umständen nicht gelten, weil ein Nutzer den Abruf auslöst. Dieser Bot crawlt das Netz nicht automatisch.
Wie erkenne ich Besuche aus ChatGPT in Matomo?
Matomo hat einen eigenen Kanal für KI-Assistenten, in der selbst betriebenen Version ab 5.5.0. Er erkennt unter anderem ChatGPT und zeigt die Besuche unter Akquisition.
Kann ich meine Produkte in ChatGPT anzeigen lassen?
OpenAI beschreibt dafür einen strukturierten Produktfeed, über den ChatGPT Produkte mit Preis und Verfügbarkeit anzeigen soll. Prüfen Sie vorher die Teilnahmebedingungen, die Übersichtsseite nennt keine Länder.
Noch eine Frage offen?
In der gratis Sprechstunde beantworten wir Fragen zu SEO live, jeden ersten Samstag im Monat um 18 Uhr. Oder Sie rufen einfach an.
Zuletzt geprüft am 03.11.2026, nächste Prüfung spätestens im November 2027. Haben Sie einen Fehler entdeckt? Schreiben Sie uns.
