OpenAI hat die offizielle Beschreibung seines Webcrawlers OAI-SearchBot aktualisiert , des Tools, das zur Informationssammlung für ChatGPT verwendet wird.
Das Unternehmen hat wichtige Details zur Funktionsweise des Raupenfahrzeugs und zu dessen Einsatzmöglichkeiten geändert.
Diese Aktualisierungen haben bereits die Aufmerksamkeit von SEO-Experten und Webanalysten auf sich gezogen.
Die Änderungen deuten darauf hin, dass OpenAI die Rollen seiner verschiedenen Bots verfeinert und die Art und Weise anpasst, wie sie mit Websites interagieren.
ChatGPT-Crawler: Was OpenAI in der Crawler-Beschreibung geändert hat

Die neue Beschreibung entfernt Verweise auf die Linksammlung und das Inhaltstraining für Basismodelle. Außerdem werden neue Rollen für andere OpenAI-Bots hinzugefügt.
Wichtige Aktualisierungen:
- OAI-SearchBot erwähnt das Training von KI-Modellen nicht mehr.
- Der ChatGPT-Benutzerbot hält sich möglicherweise nicht vollständig an die robots.txt-Regeln.
- OAI-SearchBot hat möglicherweise keine Kontrolle über die in ChatGPT-Antworten angezeigten Links.
- Der ChatGPT-Benutzerbot unterstützt jetzt benutzerdefinierte GPT-Funktionen und GPT-Aktionen.
- OAI-SearchBot und GPTBot teilen sich jetzt Crawling-Daten.
- Ein Crawler kann beiden Bots dienen, sofern beide zugelassen sind.
Die SEO-Protokolle zeigen, dass mehrere OpenAI-Bots die Websites für die gleiche Anfrage besuchen, was die aktualisierte Erklärung unterstützt.
Lesen Sie auch: ChatGPT Ads 2025: OpenAIs nächster Gamechanger für das Marketing
Warum diese Änderungen an den Raupenfahrzeugen wichtig sind
Diese Aktualisierungen wirken sich darauf aus, wie Website-Betreiber die Crawler von OpenAI verwalten. Die veränderte Verhaltensweise der Bots kann Auswirkungen darauf haben, wie Inhalte in den ChatGPT-Ergebnissen dargestellt werden.
Auswirkungen auf Website-Betreiber:
- OAI-SearchBot blockieren wird nicht Verhindern, dass Links in ChatGPT angezeigt werden
- GPTBot und OAI-SearchBot können doppeltes Crawling reduzieren
- Die robots.txt-Regeln gelten möglicherweise nicht vollständig für alle OpenAI-Bots.
- Die Website-Protokolle weisen möglicherweise eine größere Überschneidung zwischen den OpenAI-Crawlern auf.
- Benutzerdefinierte GPT-Funktionen könnten stärker auf den ChatGPT-Benutzerbot angewiesen sein.
Analysten vermuten, dass dieses Update darauf hindeuten könnte, dass OpenAI die Datenerfassung durch ChatGPT flexibler gestalten möchte. Einige glauben auch, dass OpenAI die Erfassung von Modelltrainingsdaten von der Erfassung von Nutzeraktionen trennt, um Verwirrung zu vermeiden.
Pieter Serraris, der das Update entdeckte, sagte, die neue Formulierung deute auf „große Veränderungen“ in der Art und Weise hin, wie OpenAI seine Bots im Web einsetzen wolle.
Relevante Artikeln:


Kommentare
Sei der Erste, der einen Kommentar hinterlässt.