Компания OpenAI обновила официальное описание своего веб-краулера OAI-SearchBot , инструмента, используемого для сбора информации для ChatGPT.
Компания внесла ключевые изменения в принцип работы гусеничного робота и его разрешенные функции.
Эти обновления уже привлекли внимание SEO-специалистов и веб-аналитиков.
Эти изменения свидетельствуют о том, что OpenAI совершенствует функции своих различных ботов и корректирует способы их взаимодействия с веб-сайтами.
Веб-краулер ChatGPT: Что изменила компания OpenAI в описании веб-краулера
В новом описании удалены ссылки на сбор ссылок и обучение контента для базовых моделей. Также добавлены новые роли для других ботов OpenAI.
Отмечены ключевые обновления:
- OAI-SearchBot больше не упоминает обучение моделей ИИ.
- Пользовательский бот ChatGPT может не полностью соблюдать правила robots.txt.
- OAI-SearchBot может не контролировать ссылки, отображаемые в ответах ChatGPT.
- Теперь бот ChatGPT User обрабатывает пользовательские GPT-теги и действия GPT.
- OAI-SearchBot и GPTBot теперь обмениваются данными сканирования.
- Если обоим ботам разрешено одновременное сканирование, один проход может обслуживать обоих ботов.
Журналы SEO показывают, что несколько ботов OpenAI посещают веб-сайты с одним и тем же запросом, что подтверждает обновленное объяснение.
Читайте также о: ChatGPT Ads 2025: следующий прорыв OpenAI в маркетинге
Почему эти изменения в гусеничном ходу важны
Эти обновления повлияют на то, как владельцы веб-сайтов управляют поисковыми роботами OpenAI. Изменение поведения роботов может повлиять на то, как контент отображается в результатах поиска ChatGPT.
Влияние на владельцев веб-сайтов:
- Блокировка OAI-SearchBot не будет Предотвратить появление ссылок в ChatGPT
- GPTBot и OAI-SearchBot могут уменьшить количество повторных индексаций.
- Правила robots.txt могут применяться не ко всем ботам OpenAI в полном объеме.
- В логах сайта может наблюдаться большее совпадение между поисковыми роботами OpenAI.
- Возможно, для реализации пользовательских функций GPT больше потребуется помощь бота ChatGPT User.
Аналитики говорят, что это обновление может означать, что OpenAI хочет большей гибкости в том, как ChatGPT собирает информацию. Некоторые также считают, что OpenAI разделяет сбор данных для обучения моделей и сбор данных о действиях пользователей, чтобы избежать путаницы.
Питер Серрарис, заметивший обновление, сказал, что новая формулировка сигнализирует о «больших изменениях» в том, как OpenAI хочет, чтобы ее боты работали в интернете.
Читайте также:
Комментарии
Оставьте первый комментарий.