Активность сканирования OpenAI утроилась с момента появления GPT-5, показывают данные.

Недавнее исследование, проведённое Botify при участии Криса Лонга, предполагает, что OpenAI значительно увеличила свою активность по обходу веб-сайтов – примерно в три раза – после выпуска GPT-5.

Купил акции на все деньги, а они упали? А Илон Маск снова написал твит? Знакомо. У нас тут клуб тех, кто пытается понять этот цирк и не сойти с ума.

Купить на падении (нет)

Данные Botify показывают, что веб-краулер OpenAI, используемый для поиска в интернете, теперь создает больше данных журналов, чем краулер, использовавшийся для обучения его AI-моделей. Это изменение – ранее краулер для обучения генерировал больше данных, чем краулер для поиска, до разработки GPT-5.

Дэниел Лонг, сооснователь SEO-компании Nectiv, изучил приблизительно 7 миллиардов записей активности ботов OpenAI. Эти данные поступили от клиентов Botify и охватывали период с ноября 2024 года по март 2026 года.

Что показывают данные.

Два из трех пользовательских агентов OpenAI, измеренных Botify, показали всплеск активности вокруг запуска GPT-5.

Функция веб-поиска ChatGPT, работающая на OAI-SearchBot, показала значительный рост активности после августа 2025 года – примерно в 3,5 раза больше, чем раньше. Это переводится в приблизительно 2,2 миллиарда дополнительных точек данных, зарегистрированных Botify.

GPTBot, используемый для сбора данных с целью улучшения его производительности, отследил примерно в 2,9 раза больше активности за этот период – дополнительные 1,8 миллиарда единиц данных.

https://www.searchenginejournal.com/wp-json/sscats/v2/tk/Middle_Post_Text

Третья группа пользователей, называемая ChatGPT-User, показала другую тенденцию. Журналы указывают на снижение активности на 28% среди ChatGPT-User в период с декабря 2025 года по март 2026 года. Эта группа представляет пользователей, активно запрашивающих страницы через ChatGPT, поэтому снижение отражает меньшее количество запросов, инициированных пользователями, а не обязательно уменьшение общего использования ChatGPT.

Поисковый бот теперь опережает обучающий бот.

До запуска GPT-5, OAI-SearchBot и GPTBot обнаруживались в данных Botify с аналогичной частотой, с примерно одинаковым количеством поисковых событий и событий обучения. После GPT-5 количество поисковых событий увеличилось, став примерно на 14% выше, чем количество событий обучения.

Эта находка подтверждает прогноз Дэна Петровича на 2025 год о GPT-5: что OpenAI все больше полагается на результаты поиска в реальном времени, а не на свои существующие знания. Данные Botify подтверждают это наблюдение.

Обзор индустрии

После выпуска нового поискового бота (следующего за GPT-5) трафик веб-сайтов из него варьировался в зависимости от отрасли. Сайты, посвященные здравоохранению и Медиа/Издательствам, испытали значительный рост – примерно на 740% и 702% соответственно. Маркетплейсы, компании-разработчики программного обеспечения и розничные сайты также зафиксировали рост, в диапазоне от 190% до 216%.

Веб-сайты о путешествиях зафиксировали умеренный рост в 30%. Способ, которым различные сайты используют поиск по сравнению с инструментами обучения, также значительно варьируется. Для Медиа и Издательств наблюдается огромная разница – увеличение на 256% – в частоте использования поисковых ботов по сравнению с обучающими ботами. Компании, занимающиеся программным обеспечением и интернетом, как правило, сосредотачиваются на поиске, в то время как здравоохранение и розничная торговля предпочитают обучение, демонстрируя снижение на 50% и 33% соответственно. В целом, GPTBot используется чаще, чем поисковые боты.

Botify и Long имеют разные подходы к тому, как OpenAI обрабатывает запросы. Когда вы спрашиваете о новостях, OpenAI использует прямой поиск, чтобы найти текущую информацию. Для вопросов о здоровье или продуктах он использует предварительно существующие знания, на которых он был обучен.

Как обход OpenAI соотносится с обходом Google?

Даже после утроения, активность сканирования OpenAI значительно меньше, чем у Google.

За прошедший месяц веб-краулер Google, Googlebot, обнаружил 18,2 миллиарда событий. Для сравнения, все краулеры OpenAI вместе зарегистрировали 887 миллионов событий. Это означает, что активность сканирования OpenAI составляет около 4% от активности Google.

Всего год назад Google обработал около 15 миллиардов событий по сравнению с 207 миллионами для OpenAI – примерно 1,38% от объёма Google. Хотя OpenAI быстро растёт и сокращает разрыв, Google по-прежнему обрабатывает значительно больше событий в целом – примерно в 20 раз больше, на самом деле.

Bingbot недавно зафиксировал приблизительно 5,49 миллиарда взаимодействий, указывая на то, что OpenAI составляет около 14% от общей активности Bing.

Методология и коммерческий контекст

Как специалист по цифровому маркетингу, я недавно проанализировал набор данных от Botify, который включает данные от некоторых их корпоративных клиентов. Эти клиенты охватывают различные отрасли – мы говорим о розничной торговле, электронной коммерции, технологиях, издательском деле, туризме и онлайн-рынках. Я поделился своими выводами как гостевой пост в блоге Botify.

Как специалист по цифровому маркетингу, хочу сразу сказать: мы в Botify предлагаем программное обеспечение, которое анализирует файлы журналов веб-сайтов и помогает управлять AI ботами. Эта статья предназначена для того, чтобы заинтересовать людей в присоединении к нашему предстоящему вебинару и запросе персонализированной демонстрации нашего продукта.

Данные включают в основном веб-сайты крупных компаний и неточно отражают разнообразие веб-сайтов, доступных в интернете.

Почему это важно

Наши данные показывают, что OAI-SearchBot от OpenAI сейчас создает больше журналов веб-сайтов, чем GPTBot. Это означает, что веб-сайты, блокирующие только GPTBot, на самом деле не блокируют бота, который OpenAI использует для показа веб-сайтов в результатах поиска ChatGPT.

Сайты, блокирующие OAI-SearchBot, могут исключать себя из ответов поиска ChatGPT.

Как это соотносится с другими отчётами.

Исследования Botify подтверждают то, что наблюдают другие компании: AI-боты OpenAI делают значительно больше запросов к веб-сайтам, чем боты Google. Например, одно исследование показало, что ChatGPT-User сделал на 3,6 раза больше запросов, чем Googlebot, на сайтах WordPress. Данные Hostinger показали, что OAI-SearchBot от OpenAI в настоящее время сканирует больше веб-страниц, чем GPTBot, а последний отчет Akamai подтверждает, что OpenAI генерирует наибольший трафик AI-ботов на издательские веб-сайты.

Важно отслеживать обучение ИИ и поисковые обходы как отдельные действия, особенно с увеличением активности OAI-SearchBot.

Смотрите также

2026-04-29 03:40