Падение сканирований Googlebot? Мюллер указывает на ошибки сервера.

Проще говоря, обсуждение на Reddit относительно неожиданного падения веб-трафика привлекло внимание Джона Мюллера из Google. Он посоветовал, что такие резкие падения часто вызваны проблемами, такими как ошибки 429, 500 или 503 (которые обычно указывают на перегрузку или тайм-ауты сервера), а не ошибками 404 (указывающими на несуществующие веб-страницы).

Что произошло

В ходе беседы участник упомянул, что наблюдалось приблизительно 90-процентное снижение запросов на сканирование в течение дня после внедрения некорректных URL-адресов hreflang в HTTP-заголовки.

Сообщается, что URL-адреса hreflang возвращали ошибку 404, когда Googlebot пытался их получить.

Они написали:

В течение прошлой недели в процессе развертывания произошла ошибка, которая привела к неправильным URL -адресам Hreflang, включенные в ссылку: HTTP -заголовки по всему веб -сайту.

  • Googlebot ползал их немедленно → Все вернулись жесткие 404.
  • В течение 24 часов запросы сканирования упали на ~ 90%.
  • Индексированные страницы стабильны, но объем восхищения еще не восстановился »

Что сказал Мюллер

Мюллер предположил, что причиной столь быстрого снижения могут быть не только ошибки 404, но и проблемы на стороне сервера, которые представляются более вероятной причиной произошедшего.

Мюллер написал:

Как эксперт SEO, я хотел бы отметить, что быстрый отклик в скорости ползания обычно связан с такими ошибками, как 429, 500 или 503, или тайм -ауты. Однако, если вы сталкиваетесь с 404 с, обычно нет причин для немедленной заботы. Как только Googlebot узнает об этом, он автоматически повторно их повторно.

Например, если CDN был тем, кто блокировал Googlebot, вы захотите убедиться, что эта проблема решается быстро. Когда ваш сервер стабилизируется, скорость ползания естественным образом вернется к своим нормальным темпам самостоятельно. Важно отметить, что для этого процесса нет фиксированных сроков.

В чрезвычайной ситуации может быть разумно быстро снизить скорость ползания, чтобы решить немедленную проблему. С другой стороны, увеличение скорости ползания должно быть сделано тщательно и постепенно.

Это соответствует задокументированным рекомендациям Google по управлению сканированием.

Если вам необходимо ограничить скорость сканирования на короткий период, Google рекомендует возвращать ответы 500, 503 или 429. Ответы 403/404 не предназначены для этой цели. Подробнее смотрите в рекомендациях Google по снижению скорости сканирования.

Следующие шаги

Когда наблюдается внезапное снижение количества поступающих запросов (от веб-сканеров), изучите, какие данные ваши серверы и сеть доставки контента (CDN) отправили Googlebot за этот период времени.

  • Проверьте журналы и статистику сканирования Search Console на предмет скачков ошибок 429/500/503 или таймаутов.
  • Убедитесь, что CDN, межсетевой экран или ограничитель скорости не блокируют Googlebot.
  • Убедитесь, что зарегистрированные ошибки 404 являются доминирующим сигналом, а не случайностью.

Имейте в виду, что восстановление не происходит мгновенно. По словам Мюллера, скорость сканирования постепенно вернется к обычному темпу, как только проблемы на стороне сервера будут устранены, и нет заранее определенного срока для этого.

Смотрите также

2025-08-15 17:49

Chartbeat: Трафик из Google к издателям стабилен на протяжении многих лет

Основываясь на различных внешних исследованиях, кажется, что объем трафика из Google Поиска на веб-сайты значительно снизился после выпуска AI Overviews. Однако недавнее исследование, проведенное Chartbeat, показывает, что трафик к новостным издателям из Google, включая Discover, оставался довольно стабильным в течение последних нескольких лет.

Согласно недавним данным Chartbeat, доля общего трафика для крупных новостных изданий, полученного из поисковых систем, оставалась стабильной в течение последнего года.

Это новое исследование подтверждает и предоставляет доказательства утверждения Google о том, что показатели кликов остались стабильными после внедрения обзоров на основе искусственного интеллекта в Поиске Google.

Есть одна оговорка, эти данные включают Google Discover, который технически не является Google Поиском.

Начиная с января 2019 года, этот анализ охватил значительное количество – 565 новостных изданий, базирующихся в США и Великобритании, что говорит о том, что мы имеем дело с довольно большим числом издательских организаций. Однако, похоже, что многие из них – крупные издатели, а не мелкие, такие как я.

Даже с появлением обзоров на основе искусственного интеллекта от Google в 2024 году и режима ИИ в этом году, не произошло значительного снижения поискового трафика (такого как Google Discover), вносящего вклад в общий объем переходов. Это связано с тем, что люди по-прежнему находят необходимую им информацию через поиск, не обязательно переходя на веб-сайты.

В январе 2019 года переходы из поисковых систем составляли около 15,52% от общего объема. Пик пришелся на март 2020 года, составив примерно 20,62%, после чего наблюдалось небольшое снижение до 19,03% в июле. В течение некоторого времени наблюдалась довольно стабильная тенденция, но сейчас кажется, что переходы из поисковых систем составляют немного больший процент от общего трафика, хотя общий объем немного увеличился. Доля поисковой системы Google в общем объеме поискового трафика незначительно выросла.

Вот диаграмма:

Но Google Новости выглядят не очень привлекательно – посмотрите на этот устойчивый спад:

Согласно анализу Chartbeat, Google (исключая Discover) обеспечивает примерно 96,2% веб-трафика из поисковых запросов, доля которого стабильно остается между 95,1% и 96,8% с января 2019 года. Другие поисковые системы, учтенные в этих данных, включают Yahoo и Bing.

Статья посвящена значительному падению органического трафика из социальных сетей, зафиксированному на Facebook, X и ряде других платформах.

С точки зрения поисковой оптимизации, я считаю эти данные интригующими, поскольку они, кажется, контрастируют с общими тенденциями, которые мы наблюдали, такими как «великое разъединение» и выводы из других исследований. В любом случае, это предоставляет ценные сведения, на которые Google может ссылаться и, возможно, пересмотреть свою стратегию.

Благодарность Гленну Гейбу:

Данные, собранные Chartbeat, показывают, что трафик из поисковых систем на крупные новостные сайты оставался стабильным с 2019 года, но в течение последнего года наблюдается снижение трафика из социальных сетей и прямых переходов, служащих источниками трафика для этих издателей.

Гленн Гейб (@glenngabe) 14 августа 2025 года

Смотрите также

2025-08-15 15:48

Поиск на основе искусственного интеллекта: адаптация вашей стратегии поисковой оптимизации

Использование традиционных стратегий SEO, ориентированных на ключевые слова и ссылки, больше не приносит значительных результатов, учитывая переход Google к ответам на основе искусственного интеллекта.

Снижение количества органических кликов связано с увеличением количества обзоров, созданных искусственным интеллектом Google, и растущей популярностью поисковых запросов без кликов, когда пользователи получают ответы прямо на странице результатов поиска Google, не переходя на внешние веб-сайты.

Проще говоря, поисковая оптимизация (SEO) не исчезла, но претерпела изменения. Чтобы преуспеть в текущей ситуации, компаниям и маркетологам необходимо адаптироваться, сосредоточившись на структурированном, целенаправленном контенте, который укрепляет доверие, а также более тесно согласовывая свои стратегии с идентичностью бренда и пользовательским опытом.

Но как же это сделать? Давайте исследуем.

Всеканальная стратегия

В современной онлайн-среде крайне важно налаживать связь со своей аудиторией на всех подходящих платформах, таких как Reddit, Quora, TikTok, YouTube и другие, которые ей интересны.

Как профессионал в сфере цифрового маркетинга, я бы рекомендовал оперативно создать присутствие вашего бренда на платформах обнаружения, поскольку они служат важными каналами для привлечения потенциальных клиентов. Не упустите эту возможность!

Привычки пользователей изменились, и теперь они используют различные поисковые платформы и источники для поиска информации, товаров, отзывов и многого другого.

Например:

  • Reddit для получения мнений других пользователей, которые использовали аналогичный продукт или услугу.
  • TikTok и YouTube для обучающих материалов и обзоров продуктов.
  • Instagram для поиска нового.
  • Amazon и Pinterest для отзывов о товарах и вдохновения.

Сосредоточившись исключительно на Google в своей маркетинговой стратегии, вы упускаете из виду значительную часть вашей целевой аудитории, которая не может найти ваш контент, поскольку он фактически скрыт от их внимания.

Оптимизировать для обзоров, созданных искусственным интеллектом

Проще говоря, чтобы бренду или маркетологу занять лидирующие позиции (AIO — предположительно, ‘Above the Fold Organic’ или ‘AI Optimized’) в результатах поиска, им следует уделять приоритетное внимание созданию подробного, достоверного контента, который напрямую отвечает на запросы пользователей, хорошо структурирован и достаточно прост для легкого анализа алгоритмами искусственного интеллекта.

Тактика Обзор Лучшие практики
Создавайте высококачественный контент для общения. Проведите исследование и посмотрите, какие запросы отображаются по поисковым запросам, связанным с комплексными решениями. Создавайте оригинальный и уникальный контент, который соответствует намерениям пользователей и отвечает на их вопросы. Обновите и измените существующий контент для обзоров с использованием искусственного интеллекта, отвечая на вопросы, делая его более разговорным и используя цитаты, отзывы и обновленные заголовки.
Используйте простые заголовки и короткие абзацы. Это помогает улучшить читаемость контента как для пользователей, так и для искусственного интеллекта. Используйте четкие заголовки, лаконичные абзацы и естественный язык, чтобы улучшить понимание текста искусственным интеллектом.
Размечайте контент структурированными данными. Это помогает искусственному интеллекту и традиционным поисковым системам лучше понимать ваш контент. Используйте схематическую разметку (например, Страница часто задаваемых вопросов, Инструкция, Продукт).
Впустите ИИ-ботов. Это поможет поисковым системам проиндексировать ваш контент, а системам искусственного интеллекта – использовать его в качестве источника. Используйте llm.txt и проверьте свой файл robots.txt, чтобы разрешить доступ ботам, таким как GPTBot от OpenAI и Google AI. Убедитесь, что они не заблокированы.
Получите упоминания на надежных сайтах. Это поможет укрепить ваш авторитет и повысить узнаваемость бренда. Создавайте высококачественный контент с уникальной информацией, публикуйте гостевые посты, будьте активны в социальных сетях, участвуйте в подкастах, используйте внутренние ссылки и внедряйте PR-стратегии.
Поддерживайте контент актуальным. Чат-боты с искусственным интеллектом любят актуальную информацию. Регулярно обновляйте контент новыми данными, статистикой и уникальной ценной информацией для конечных пользователей.
Отслеживайте упоминания бренда. Бренды, которые часто упоминаются на различных платформах (например, в пресс-релизах, блогах, социальных сетях, новостных статьях, на YouTube и в форумах, таких как Reddit и Quora, а также на авторитетных сайтах), как правило, упоминаются искусственным интеллектом. Используйте инструменты, такие как Google Search Console, Brand24 и Mention.com, чтобы отслеживать онлайн-дискуссии.

Сосредоточьтесь на брендовых запросах

Брендовые запросы значительно влияют на восприятие брендов, повышают вовлеченность аудитории и поддерживают заметность и авторитетность брендов в больших базах данных языковых моделей.

Большие языковые модели (БЯМ) функционируют иначе, чем традиционные поисковые системы. Вместо простого сопоставления ключевых слов, они анализируют намерения пользователя, учитывают общий контекст и отдают приоритет результатам, релевантным для ведения беседы.

Чтобы повысить узнаваемость вашего бренда:

  • Ваша информация должна быть точной и единообразной на всех платформах.
  • Ваш контент должен быть полезным и информативным для вашей целевой аудитории.
  • Это должно демонстрировать экспертность за счет лидерства мнений, предлагая оригинальные, уникальные и подкрепленные данными идеи, которые цитируются на авторитетных сайтах и форумах.
  • Вашему бренду нужна сильная репутация.

Измените свою стратегию, отслеживая упоминания вашего бренда с помощью инструментов, таких как Brand24 и Semrush, и оценивая трафик, генерируемый методами языковых моделей, используя Google Analytics 4. Кроме того, проверяйте видимость вашего бренда на различных платформах и устройствах, чтобы обеспечить оптимальный охват.

Сосредоточьтесь на намерениях пользователя и тематических кластерах

Мы перешли от ключевых слов к релевантности.

Чтобы обеспечить всестороннее освещение и эффективно отвечать на запросы пользователей, создавайте подробный контент, который тщательно исследует различные аспекты темы.

Используйте развернутые, естественные фразы, которые точно отражают намерения пользователя. Инструменты, такие как MarketMuse от Siteimprove, отлично подходят для эффективного достижения этой цели.

Создание и оптимизация контента на основе искусственного интеллекта

Google не против контента, созданного искусственным интеллектом. Google не любит некачественный контент, созданный ИИ.

До появления больших языковых моделей создание контента обычно было длительным процессом, включавшим ручное написание и оптимизацию, с значительными затратами времени на создание отличной статьи, подчеркивающей такие аспекты, как E-E-A-T (экспертность, опыт, авторитетность и надежность).

С этого момента вы можете использовать искусственный интеллект для легкого создания брифов для контента, разработки планов, написания черновиков, их редактирования и персонализации контента. Многие современные инструменты и платформы интегрируют ChatGPT с уникальными алгоритмами для улучшения предоставляемых услуг.

Как опытный веб-мастер, я обнаружил, что искусственный интеллект может значительно ускорить создание контента и упростить его оптимизацию, как никогда раньше. Однако я не советую полагаться исключительно на ИИ для генерации контента. Хотя он обеспечивает отличную помощь с точки зрения скорости и эффективности, ничто не сравнится с подлинностью, глубиной и эмоциональным откликом, которые приносит контент, созданный человеком.

Вот почему.

В океане информации крайне важно выделяться, предлагая уникальный и познавательный контент. Стремитесь зарекомендовать себя как авторитета в своей области, убедите читателей в своей экспертности, завоевывайте доверие и предоставляйте решения их проблем.

Подобный контент лучше всего создается людьми, с помощью искусственного интеллекта для повышения его качества, увеличения вовлеченности и вдохновения других на его распространение.

Подведение итогов

SEO быстро меняется, превращаясь в разговорный опыт, основанный на искусственном интеллекте.

Тактики и стратегии, которые раньше работали, больше неэффективны в современных результатах, основанных на искусственном интеллекте.

Однако, поисковая оптимизация на этом не заканчивается; вместо этого она переходит в новую фазу, поскольку Google продолжает стремиться к организации мировой информации, делая её легкодоступной и полезной для всех.

В наше время крайне важно, чтобы бренды и специалисты по маркетингу перестали сосредотачиваться исключительно на достижении высоких позиций и вместо этого сосредоточились на усилении своего присутствия, авторитета и отклика на различных платформах, таких как Google, TikTok, Reddit или Quora.

Обеспечение того, чтобы предоставляемый контент был не только уместным, но и своевременным, эффективно решая проблемы пользователей и помогая им на протяжении всего их взаимодействия, также имеет решающее значение.

Как профессионал в сфере цифрового маркетинга, я рад сказать, что искусственный интеллект готов помочь, а не забрать мою работу! Он предназначен для облегчения нагрузки, беря на себя более сложные задачи, но помните, я по-прежнему за рулем, направляя наши маркетинговые стратегии к успеху. Искусственный интеллект – просто мой надежный помощник в этом путешествии!

Успешные бренды – это те, которые вкладывают личный, чуткий подход в предоставление ценности, демонстрируя компетентность и выстраивая подлинные отношения со своей аудиторией.

Не забывайте, для кого вы на самом деле создаете контент – для людей.

Смотрите также

2025-08-15 15:28

Проверка возраста в Google Поиске: запрос на подтверждение вашего совершеннолетия

Недавно компания Google начала процесс внедрения возрастной верификации, о котором было объявлено несколько недель назад. Эта функция применяется не только к YouTube, но и распространяется на рекламу в Поиске Google, как упоминалось в нашем предыдущем отчете.

Как опытный вебмастер, я гарантирую, что наша платформа уделяет первостепенное внимание предоставлению персонализированной рекламы, сохраняя при этом максимальное уважение к конфиденциальности пользователей. Я стремлюсь оптимизировать персонализацию и таргетинг рекламы в соответствии со всеми применимыми нормами конфиденциальности и законодательства, тем самым обеспечивая увлекательный пользовательский опыт, не нарушая при этом права отдельных пользователей на конфиденциальность.

Как опытный специалист по поисковой оптимизации, я недавно наткнулся на интересное развитие событий на Reddit — уведомление от Поиска Google с просьбой к пользователям подтвердить свой возраст из-за определенного контента. Благодарю команду Tech Issues Today за то, что обратили на это мое внимание!

Вот этот скриншот:

Это гласит:

Google изменил некоторые из ваших настроек: Мы изменили некоторые настройки вашей учётной записи, поскольку не смогли подтвердить, что вы совершеннолетний. Убедитесь, что новые настройки вам подходят.

Вы можете узнать больше об этих изменениях здесь.

Смотрите также

2025-08-15 14:44

Биржа Binance в замешательстве: 900 миллионов Dogecoin обрушились на вечеринку — отменяется ли полёт на Луну?

Иногда — к счастью, редко — нас ошеломляет зрелище высоких финансов, смешивающихся с низменными страстями интернета. В эту конкретную среду крипто-клан подвергся атаке настолько огромной транзакцией, что даже самого опытного игрока заставило бы подавиться своим джин-физзом: 900 000 000 DOGE, безрассудно брошенных на биржу, возможно, в духе римского разгула, а возможно, просто от скуки.

Надёжные зануды из Whale Alert прозвенели в колокол (как они обычно делают, периодически напоминая о своем существовании), настаивая на том, что происхождение этого кошелька окутано захватывающей тайной. Разумеется, после проверки, и ни для кого не стало сюрпризом, выяснилось, что это собственная структура кошельков Binance, замаскированная под тайную деятельность, больше похожая на бухгалтера с печатью.

Что же остается, то лишь вульгарный масштаб сделки и изысканное время – наступившее, когда рынок DOGE шатался с той же устойчивостью, что и лорд Тангент в произведениях Вога. Истинное величие, если это слово применимо (на самом деле нет), заключается в адресе, который сейчас занимает место над сокровищницей из 2,88 миллиарда DOGE (почти 500 миллионов долларов, или достаточно, чтобы купить несколько умеренно больших английских графств и надежного дворецкого). Похоже, это не кошелек какого-то эксцентричного сибирского принца, а хранилище ликвидности для Binance – где миллиарды крутятся, приходят, уходят и, если быть честным, иногда унывают.

🚨 🚨 🚨 🚨 🚨 🚨 🚨 🚨 🚨 900 000 000 #DOGE (207 970 364 USD) переведены с неизвестного кошелька на #Binance

— Whale Alert (@whale_alert) 15 августа 2025 г.

Настроение, анализируя транзакцию, могло склоняться к трагическому, если бы не последовавшие за этим изменения цены: DOGE опустился с максимума выше 0.25 доллара до более скромных 0.22 доллара. Графики, всегда стремящиеся придать видимость псевдонаучности, теперь показывают сопротивление около 0.238 доллара – хотя, как и с английской погодой, можно предположить, что все это изменится к обеду. Мягкий уровень поддержки в 0.228 доллара манит, словно потертый кушетка в пансионе в Брайтоне.

Что это значит для DOGE на Binance?

В теории, переводы средств из кошелька такого масштаба должны предвещать титанические движения рынка – сокрушая мечты и раздувая эго в равной мере. На практике, они в основном служат для раздражения дейтрейдеров и вдохновляют авторов в социальных сетях на глубокую посредственность. Книга ордеров может пошатнуться, маркет-мейкеры могут некомфортно ерзать на своих эргономичных креслах, и, возможно, DOGE сам задумается о том, взлететь ли к $0.24 или рухнуть в поисках более твердой почвы на уровне $0.22.

В заключение: и развлечение, и удивление доступны бесплатно. Карнавал криптовалют продолжается. 🐕🚀

Смотрите также

2025-08-15 14:06