Смешанные сообщения Google: действительно ли робот Google «переходит» по ссылкам?

Как опытный веб-мастер с более чем двадцатилетним опытом работы в цифровой среде, я могу с уверенностью сказать, что недавнее разоблачение Google о поведении их сканера меня одновременно позабавило и просветило. Тот факт, что один из аналитиков Google признался в несоответствии между их публичными сообщениями и реальными функциями их сканера, является не чем иным, как забавным, особенно учитывая огромные размеры и влияние технологического гиганта.


Во время недавнего обсуждения подкаста Google Search Off the Record аналитик Google Гэри Иллис объяснил, как робот Googlebot обрабатывает взаимодействие со ссылками во время процедуры сканирования.

Как эксперт по SEO, я хотел бы поделиться интригующей точкой зрения, которая бросает вызов общепринятому представлению: в отличие от распространенного мнения, робот Googlebot не перемещается по сайтам, нажимая на живые ссылки в режиме реального времени.

Проще говоря, как объяснил Иллиес, Googlebot сначала собирает ссылки, а затем переходит к их последовательной обработке, а не сразу переходит по ним одну за другой.

Это недоразумение связано с собственной документацией Google.

Противоречивая информация

«Это моя любимая мозоль», — заявил Иллиес во время подкаста, имея в виду страницы поддержки Google.

Он продолжает:

На нашем сайте мы часто говорим, что робот Googlebot перемещается по ссылкам, но на самом деле он не переходит от одной ссылки к другой, как это сделал бы человек. Вместо этого он собирает ссылки для дальнейшего использования, а затем возвращается к этим собранным ссылкам.

Что говорят документы

В официальной документации Google по сканерам говорится (выделено мной):

«Сканер» — это просто термин для любого программного обеспечения, которое автоматически перемещается по веб-сайтам. Его часто называют «роботом» или «пауком». Он делает это, переходя по ссылкам на одной веб-странице и переходя на следующую. «

Документ подразумевает, что робот Googlebot перемещается по сети, активно переходя по ссылкам в режиме реального времени.

Это подчеркивает несоответствие между публичными сообщениями Google и реальной функциональностью их сканера, вызывая вопросы о других потенциальных недопониманиях в сообществе SEO.

Последствия для SEO

Это открытие имеет несколько потенциальных последствий для того, как мы понимаем процесс сканирования Google:

  • Архитектура сайта. Хотя логическая структура сайта важна, идея о том, что робот Google должен «находить» глубокие страницы с помощью серии кликов, может быть устаревшей. Это может повлиять на то, как мы подходим к внутренним ссылкам и глубине сайта.
  • Частота сканирования. Эта информация может объяснить, почему некоторые страницы сканируются чаще, чем другие, независимо от их положения в иерархии сайта.

Заглядывая в будущее

Некоторые стратегии SEO основаны на идее, что веб-сканер Google, Googlebot, перемещается по сайтам так же, как посетитель, переходя с одной страницы на другую, используя в качестве руководства внутренние ссылки сайта.

Если рассказ Иллиеса верен, это означает, что функционирование робота Googlebot может быть более сложным, чем мы предполагали ранее.

Хотя эта новая информация не меняет существующие рекомендации по SEO, она подчеркивает важность того, чтобы эксперты по SEO были в курсе тонкостей и обновлений Google.

Послушайте заявление Иллиеса в подкасте ниже:

Смотрите также

2024-08-09 00:08