Wie sich ChatGPT-User von GPTBot und OAI-SearchBot unterscheidet

Was ist ChatGPT-User?

OpenAI beschreibt ChatGPT-User als den Agenten, der eine Seite nur abruft, wenn eine Person oder ein innerhalb von ChatGPT laufender Custom GPT ChatGPT bittet, einen bestimmten Link zu öffnen, laut OpenAIs eigener Bot-Dokumentation auf developers.openai.com, geprüft am 9 September 2026. Diese Dokumentation stellt direkt fest, dass ChatGPT-User "nicht für automatisches Crawling im Web verwendet wird", was ihn von den beiden anderen OpenAI-Agenten unterscheidet, die tatsächlich nach eigenem Zeitplan crawlen. Eine Anfrage von ChatGPT-User entsteht, weil jemand in genau diesem Moment genau diese Seite angefragt hat.

Was ist der genaue User-Agent-String von ChatGPT-User?

ChatGPT-User identifiziert sich mit dem String Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; ChatGPT-User/1.0; +https://openai.com/bot, laut OpenAIs eigener Bot-Dokumentation. OpenAI veröffentlicht die aktuellen IP-Bereiche, aus denen dieser Agent Anfragen sendet, als JSON unter openai.com/chatgpt-user.json und bietet damit eine serverseitige Möglichkeit, eine Anfrage zu bestätigen, statt sich nur auf den Header-Text zu verlassen. Prüfen Sie sowohl das Token im User-Agent-String als auch die Quell-IP-Adresse, bevor Sie eine Anfrage als echt behandeln.

Agent	User-Agent-String	Auslöser
ChatGPT-User	Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; ChatGPT-User/1.0; +https://openai.com/bot	Eine Person oder ein Custom GPT bittet ChatGPT, einen Link zu öffnen
GPTBot	Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; GPTBot/1.4; +https://openai.com/gptbot	Automatisches Crawling für das Training von Foundation-Modellen
OAI-SearchBot	Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot	Automatisches Crawling, um Websites in der Suchfunktion von ChatGPT anzuzeigen

Wie unterscheidet sich ChatGPT-User von GPTBot?

GPTBot crawlt eine Website nach eigenem Zeitplan, und OpenAIs Dokumentation verknüpft GPTBot direkt mit Trainingsdaten und stellt fest, dass das Crawling dazu dient, "unsere generativen KI-Foundation-Modelle nützlicher und sicherer zu machen" (im Original: "to make our generative AI foundation models more useful and safe"). ChatGPT-User dagegen feuert einmalig, als Reaktion auf eine bestimmte Anfrage aus einer bestimmten Unterhaltung, und ruft nur die Seite ab, die diese Unterhaltung genannt hat. Der praktische Unterschied liegt in Zeitpunkt und Ursache: Eine GPTBot-Anfrage kann jederzeit im Rahmen eines planmäßigen Crawls eintreffen, während eine ChatGPT-User-Anfrage stets einer aktuellen Frage folgt, die eine URL genannt hat.

Wie unterscheidet sich ChatGPT-User von OAI-SearchBot?

OAI-SearchBot crawlt ebenfalls automatisch, nach eigenem Zeitplan, aber OpenAIs Dokumentation verknüpft seinen Zweck mit einem anderen Ergebnis: Websites in der Suchfunktion von ChatGPT anzuzeigen, statt ein Modell zu trainieren. ChatGPT-User teilt mit OAI-SearchBot die Verbindung zur aktiven Produktoberfläche von ChatGPT, aber die beiden arbeiten mit entgegengesetzten Auslösern, der eine läuft als ständiges Crawling, der andere feuert bedarfsgesteuert für eine einzelne Unterhaltung. Eine Website, die erscheinen möchte, wenn ChatGPT das Web durchsucht, ohne Trainingsdaten beizusteuern, entscheidet sich gezielt dafür, OAI-SearchBot zuzulassen, was eine eigene Entscheidung ist, getrennt davon, GPTBot oder ChatGPT-User zuzulassen.

Kann man ChatGPT-User in robots.txt blockieren?

Eine gewöhnliche Disallow-Regel unter einem User-agent: ChatGPT-User-Block ist die dokumentierte Syntax, aber OpenAIs eigene Bot-Dokumentation weist darauf hin, dass robots.txt-Regeln bei diesem Agenten möglicherweise nicht so gelten wie bei einem Crawler, da die Anfrage durch eine aktuelle Nutzeraktion ausgelöst wird und nicht durch ein planmäßiges Crawling. Die Regel weist eine konforme Anfrage trotzdem an, nicht fortzufahren, weshalb es sich lohnt, sie in jedem Fall zu setzen. Was sie nicht bewirkt, ist eine Person davon abzuhalten, ChatGPT nach Ihrer Seite zu fragen, auf eine Weise, die kein direktes Abrufen durch ChatGPT-User erfordert.

User-agent: ChatGPT-User
Disallow: /

Wie blockiert man GPTBot und OAI-SearchBot?

Fügen Sie für jeden Agenten, den Sie kontrollieren möchten, einen eigenen benannten Block hinzu, da eine Regel, die einen nennt, keine Wirkung auf die anderen hat.

User-agent: GPTBot
Disallow: /

User-agent: OAI-SearchBot
Disallow: /

OpenAIs Dokumentation gibt an, dass eine Änderung an robots.txt etwa 24 Stunden braucht, um die Systeme zu erreichen, rechnen Sie also mit einer Verzögerung von rund einem Tag statt mit sofortiger Wirkung. Prüfen Sie jede Anfrage gegen die veröffentlichten IP-Bereiche unter openai.com/gptbot.json und openai.com/searchbot.json, bevor Sie annehmen, ein blockierter Crawler habe die Regel ignoriert, denn ein gefälschter User-Agent-String ist ein anderes Problem als eine Regel, die sich noch nicht verbreitet hat.

Drei Agenten, drei Auslöser

Geplante Crawler

• GPTBot crawlt, um OpenAIs Foundation-Modelle zu trainieren
• OAI-SearchBot crawlt, um die Suchfunktion von ChatGPT zu betreiben
• Beide akzeptieren eine gewöhnliche robots.txt-Disallow-Regel

Nutzergesteuerter Abruf

• ChatGPT-User lädt eine Seite, um die eine Person oder ein Custom GPT gerade gebeten hat
• OpenAI erklärt, dass er nicht für automatisches Crawling verwendet wird
• OpenAI weist darauf hin, dass robots.txt-Regeln möglicherweise nicht auf dieselbe Weise gelten

Was genau stoppt, wenn man jeden von ihnen blockiert?

Das Blockieren von GPTBot stoppt das planmäßige Crawling, das OpenAI mit dem Training von Foundation-Modellen verknüpft, sodass Seiten hinter dieser Regel künftige Modell-Updates über diesen bestimmten Weg nicht mehr speisen. Das Blockieren von OAI-SearchBot stoppt das planmäßige Crawling, das OpenAI mit der Suchfunktion von ChatGPT verknüpft, sodass Seiten hinter dieser Regel seltener auftauchen, wenn jemand ChatGPT bittet, das Web zu durchsuchen. Das Blockieren von ChatGPT-User betrifft eine Anfrage, die nur entsteht, weil eine Person Ihre URL bereits in einer aktuellen Unterhaltung genannt hat, sodass die Regel vor allem den Live-Seiteninhalt für diesen einen Abruf zurückhält, statt die Website aus einem laufenden Crawling zu entfernen. Die Entscheidung, welchen der drei man blockiert, ist im Grunde die Entscheidung, welche Beziehung zu ChatGPT man behalten möchte: Trainingsdaten, Sichtbarkeit in der Suche oder die Fähigkeit, eine direkte Frage zu einer Seite zu beantworten, die jemand bereits gefunden hat.

Welche Kombination eine Website auch wählt, die nützlichere Frage ist, was ChatGPT sagt, nachdem es bereits mit den erreichbaren Inhalten geantwortet hat. KI-Such-Markenmonitoring verfolgt, wo ChatGPT, Claude und Gemini eine Marke in ihren Antworten zitieren, was das Ergebnis ist, das zählt, sobald eine dieser drei Anfragen bereits gelaufen ist. Dieselbe Dreiteilung der Crawler taucht auch bei anderen KI-Stacks auf: CCBot dokumentiert das Gegenstück von Common Crawl, ein offenes Archiv, das andere Labs in Trainingsdatensätze filtern statt direkt zu crawlen, und Applebot-Extended dokumentiert Apples Version derselben Trennung zwischen Suche und Training. Schreiben Sie jede Regel in dieselbe Datei, gemäß der Syntax aus dem vollständigen robots.txt-Leitfaden.

Was beim Blockieren jedes Agenten stoppt

GPTBot blockierenStoppt die Zufuhr für künftiges Modelltraining durch diesen Crawl

OAI-SearchBot blockierenStoppt das Erscheinen in ChatGPTs Suchfunktion

ChatGPT-User blockierenStoppt nur einen einzelnen Live-Abruf, keinen laufenden Crawl

Häufig gestellte Fragen

Blockiert das Blockieren von GPTBot auch ChatGPT-User?

Nein. OpenAIs Dokumentation gibt jedem Agenten seinen eigenen Namen und seinen eigenen robots.txt-Block, sodass eine Regel, die GPTBot nennt, keine Wirkung auf ChatGPT-User oder OAI-SearchBot hat. Schreiben Sie für jeden Agenten, den Sie kontrollieren möchten, einen eigenen Block.

Warum könnte eine robots.txt-Regel für ChatGPT-User nicht vollständig wirken?

OpenAIs eigene Dokumentation gibt an, dass robots.txt-Regeln bei ChatGPT-User möglicherweise nicht so gelten wie bei einem planmäßigen Crawler, weil die Anfrage einer aktuellen Nutzeraktion folgt und keinem automatischen Crawling. Die Regel bleibt trotzdem der dokumentierte Weg, Absicht zu signalisieren, auch wenn OpenAI auf diese Einschränkung hinweist.

Was ist der genaue User-Agent-String von OAI-SearchBot?

OAI-SearchBot identifiziert sich als Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot, laut OpenAIs eigener Bot-Dokumentation.

Wie lange dauert es, bis eine robots.txt-Änderung bei OpenAI wirkt?

OpenAIs Dokumentation gibt an, dass eine robots.txt-Aktualisierung etwa 24 Stunden braucht, um OpenAIs Systeme zu erreichen. Rechnen Sie mit rund einem Tag Verzögerung, bevor eine neue Regel für GPTBot oder OAI-SearchBot wirkt.

Wo veröffentlicht OpenAI die IP-Bereiche für diese Agenten?

Unter openai.com/gptbot.json, openai.com/searchbot.json und openai.com/chatgpt-user.json, eine Datei pro Agent, laut OpenAIs eigener Bot-Dokumentation. Prüfen Sie die Quell-IP einer Anfrage gegen die passende Datei, bevor Sie sich allein auf den User-Agent-String verlassen.

Trainiert GPTBot OpenAIs Modelle mit jeder Seite, die es crawlt?

OpenAIs Dokumentation verknüpft das Crawling von GPTBot damit, seine generativen KI-Foundation-Modelle "nützlicher und sicherer" zu machen, ohne Ausnahmen pro Seite aufzuführen. Eine Website, die keine Seite in diesen Prozess einbezogen haben möchte, blockiert GPTBot namentlich in robots.txt.

Wie unterscheidet sich CCBots Trainings-Setup von dem von GPTBot?

CCBot dokumentiert Common Crawls Entsprechung, ein offenes Archiv, aus dem andere Labore Trainingsdaten filtern, statt selbst direkt zu crawlen. GPTBot crawlt eine Website dagegen direkt nach OpenAIs eigenem Zeitplan für die eigenen Foundation-Modelle. Wer beide Fälle abwägt, trifft zwei getrennte Entscheidungen: ob OpenAI direkt crawlen darf und ob die eigenen Seiten im offenen Archiv landen, aus dem andere Labore schöpfen.

Wie vergleicht sich Applebot-Extendeds Aufteilung mit OpenAIs drei Agenten?

Applebot-Extended dokumentiert Apples Version derselben Trennung zwischen Suche und Training, die auch GPTBot von OAI-SearchBot unterscheidet. Wer OpenAIs drei Agenten steuert, trifft bei Apples Crawler fast dieselbe Entscheidung: Trainingsdaten oder Sichtbarkeit in der Suche. Der vollständige Vergleich steht im Applebot-Extended-Leitfaden.

Gehören die Regeln für GPTBot, OAI-SearchBot und ChatGPT-User in dieselbe robots.txt-Datei?

Ja, jede Regel steht in ihrem eigenen benannten User-Agent-Block innerhalb einer einzigen robots.txt-Datei statt in drei getrennten Dateien. Eine Regel, die einen Agenten benennt, wirkt sich nicht auf die anderen aus, deshalb braucht jeder Block seine eigene Disallow-Zeile. Der vollständige robots.txt-Leitfaden erklärt die genaue Syntax für mehrere Agenten-Blöcke in einer Datei.

Verfolgt KI-Markenmonitoring die ChatGPT-User-Anfrage selbst?

Es erfasst, was ChatGPT, Claude und Gemini sagen, nachdem sie bereits geantwortet haben, nicht die einzelne Abrufanfrage. Diese Zitierung ist das Ergebnis, das zählt, nachdem einer der drei OpenAI-Agenten bereits gelaufen ist, ob als geplanter Crawl oder als einzelner ChatGPT-User-Abruf. KI-Markenmonitoring folgt dem Antworttext selbst statt dem Crawl oder Abruf, der ihn gespeist hat.