В документацию Google Crawler добавлено HTTP-кэширование

Как опытный эксперт по SEO с более чем двадцатилетним опытом работы в постоянно развивающейся сфере поисковой оптимизации, я могу с уверенностью сказать, что последний шаг Google по усилению HTTP-кэширования меняет правила игры для всех нас.

Google недавно пересмотрела руководство по помощи при сканировании веб-страниц, представив новый раздел, подробно описывающий HTTP-кэширование. В этой части поясняется, как боты Google управляют директивами управления кэшем. Более того, Google опубликовал статью, в которой просил разработчиков разрешить Google сохранять их веб-страницы для более быстрого доступа.

В скромном обращении Гэри Иллис написал: «Не могли бы вы позволить нам сохранить ваш контент, пожалуйста?» в качестве первой строки своего поста в блоге. Впоследствии он объяснил, что мы предоставляем Google разрешение на кэширование нашего контента чаще, чем десять лет назад. Гэри заявил, что процент запросов, которые можно получить из локальных кэшей, на самом деле снизился: 10 лет назад примерно 0,026% всех выборок были кэшируемыми, что не особенно примечательно; сегодня эта цифра составляет 0,017%.

Google включил объяснение HTTP-кеширования в свое руководство пользователя, в котором подробно описывается, как Google управляет директивами управления кэшем. Система веб-сканирования Google придерживается стандартного механизма HTTP-кэширования, в частности, используя заголовки ответов ETag и заголовки запросов If-None-Match, а также заголовки ответов Last-Modified и заголовки запросов If-Modified-Since.

В случае Google, когда в ответе HTTP появляются заголовки ETag и Last-Modified, сканирующие боты Google будут устанавливать приоритет значения ETag в соответствии со стандартами HTTP. Чтобы обеспечить оптимальную производительность сканеров Google, рекомендуется использовать заголовок ETag вместо заголовка Last-Modified, поскольку это позволяет избежать проблем, связанных с форматированием даты. Что касается других директив кэширования HTTP, они в настоящее время не поддерживаются Google.

Я должен добавить, что Google и Bing поддерживают ETag как минимум с 2018 года.

Как эксперт по SEO, я настоятельно рекомендую включить кеширование для оптимальной производительности. Кэширование — жизненно важный компонент сложной мозаики, формирующей Интернет. Благодаря реализации кэширования страницы будут загружаться с головокружительной скоростью при повторных посещениях, сохраняя при этом ценные вычислительные и природные ресурсы. Более того, этот простой шаг может значительно снизить затраты, связанные с передачей данных».

» Гленн Гейб (@glenngabe), 9 декабря 2024 г.

4/ Как кеширование влияет на скорость загрузки страницы?

» Siddhesh SEO a/cc (@siddhesh_asawa), 9 декабря 2024 г.

Google добавил в этот раздел больше деталей, но также расширил этот раздел страницы:

Сканеры и сборщики Google поддерживают HTTP/1.1 и HTTP/2. Сканеры будут использовать версию протокола, которая обеспечивает наилучшую производительность сканирования, и могут переключать протоколы между сеансами сканирования в зависимости от предыдущей статистики сканирования. Версия протокола по умолчанию, используемая сканерами Google, — HTTP/1.1; сканирование по HTTP/2 может сэкономить вычислительные ресурсы (например, ЦП, ОЗУ) для вашего сайта и робота Googlebot, но в противном случае сайт не получит конкретной выгоды от продукта Google (например, не будет повышения рейтинга в поиске Google). Чтобы отказаться от сканирования по HTTP/2, попросите сервер, на котором размещен ваш сайт, отвечать кодом состояния HTTP 421, когда Google пытается получить доступ к вашему сайту по HTTP/2. Если это невозможно, вы можете отправить сообщение команде сканирования (однако это решение временное).
Инфраструктура сканера Google также поддерживает сканирование через FTP (как определено в RFC959 и его обновлениях) и FTPS (как определено в RFC4217 и его обновлениях), однако сканирование по этим протоколам происходит редко.

Смотрите также

2024-12-10 16:14

Google: иногда чрезмерная оптимизация приводит к SEO-спаму

Как опытный эксперт по SEO с более чем двадцатилетним опытом работы в запутанном лабиринте алгоритма Google, я могу с уверенностью сказать, что грань между оптимизацией и чрезмерной оптимизацией зачастую столь же размыта, как скриншот с низким разрешением из начала 2000-х годов.

В ответ на вопрос о том, как чрезмерная оптимизация влияет на рейтинг в Google Поиске, Джон Мюллер из Google объяснил: «Иногда «чрезмерная оптимизация» может граничить с «практикой SEO-спама».

Это всплыло на Bluesky, где вопрос был от «Мартина SEO МакГарри», который спросил:

Неужели Google недавно нацелился на «чрезмерную оптимизацию» Или это теория скрытых драгоценных камней, которую легко спутать?

Пример

Длинная страница с множеством деталей, очень естественная, но, к сожалению, повторяющаяся.

Внезапно его обогнала демо-страница (оставшаяся в системе) без контента, но с похожим мета-заголовком.

Полный ответ Джона Мюллера был следующим:

Похоже, перед вами конкретная ситуация, поэтому обобщения, вероятно, не сильно помогут. Иногда «чрезмерная оптимизация» переходит в «SEO-спам» (скажем, вы упоминаете на странице ключевые слова 1x, 10x или 1000x). Я думаю, вы просто видите здесь что-то случайное.

Следующее спросило:

Это может легко выглядеть как спам (очевидно в более ПОСЛЕДНИХ рейтингах pogo, переплетении с другими страницами с меньшим количеством ключевых слов)… мы не можем уйти от повторов, честно говоря. Это нормативная проблема: например, размещение сторонних условий и условий на странице списка, и они в значительной степени полны одних и тех же фраз.

Джон ответил:

Я не знаю ваших страниц, просто иногда нет четкой границы между «неоптимизированным», «оптимизированным», «переоптимизированным» и спамом (хотя часто спам очевиден изолированно). (Кроме того, что такое «неоптимизированный» и «оптимизированный»? :-))

Чрезмерная оптимизация — это тема, которую мы обсуждали здесь бесчисленное количество раз, поэтому добавьте ее в комплект.

Смотрите также

2024-12-10 16:14

Google Search Console Insights удаляет данные Google Analytics

Как профессионал в области цифрового маркетинга с более чем десятилетним опытом работы за плечами, я должен признать, что последний шаг Google меня слегка озадачил. Интеграция данных Google Analytics в Search Console Insights действительно изменила правила игры, упростив наш рабочий процесс и предоставив ценную информацию с одного взгляда.

Google удалил статистику Google Analytics из функции Google Search Console Insights и своей системы отчетов. В недавнем сообщении в социальных сетях они заявили, что теперь концентрируются исключительно на данных, полученных из Google Search Console, и больше не будут включать показатели из Google Analytics.

Google объявил, что делает обновление Search Console Insights доступным для всех учетных записей, стремясь упростить процесс доступа к подробной информации.

Первоначально Google представил Search Console Insights в качестве бета-версии в июне 2020 года, а затем сделал ее доступной для всех пользователей к июню 2021 года.

Прелесть этого инструмента заключалась в том, что он объединял данные Search Console и Analytics, что делало его интересным и полезным для просмотра. Но теперь Google удалил данные Google Analytics из своего инструмента, так что я не уверен…

Мы делаем Search Console Insights доступной для каждого ресурса, которым вы управляете. Отныне этот инструмент будет использовать только данные из Google Search Console и не включать показатели из Google Analytics. Наша цель — упростить вам поиск конкретной информации в Search Console Insights.

— Центр поиска Google (@googlesearchc), 10 декабря 2024 г.

Смотрите также

2024-12-10 16:14

Бета-версия Copilot теперь Инструменты Bing для веб-мастеров для 10 000 пользователей

Как опытный специалист по цифровому маркетингу с более чем двадцатилетним опытом работы за плечами, я должен признать, что последнее дополнение Microsoft к инструментам Bing для веб-мастеров — Copilot — вызвало у меня интерес. Изучив постоянно развивающийся ландшафт инструментов SEO и цифрового маркетинга, я могу с уверенностью сказать, что эта новая функция является многообещающим шагом вперед в оптимизации рабочих процессов и повышении производительности.

В октябре Microsoft обнародовала планы по интеграции функций Copilot с Bing Webmaster Tools. В отличие от отображения данных Copilot в отчетах об эффективности, эта новая функция позволяет вам задавать вопросы о ваших данных и веб-сайте непосредственно в Bing Webmaster Tools с помощью системы Copilot. На данный момент эта функция находится на стадии бета-тестирования, и Microsoft подтвердила, что к ней могут получить доступ 10 000 пользователей.

Microsoft объявила, что функция Copilot в Bing Webmaster Tools вступила в фазу бета-тестирования. Более 10 000 их лучших пользователей в настоящее время помогают в совершенствовании этого передового SEO-инструмента на основе искусственного интеллекта, предоставляя предложения, информацию и дополнительные функции в режиме реального времени.

Функция Copilot в инструментах Bing для веб-мастеров предлагает точные и подходящие решения для ваших запросов в режиме реального времени. Как объяснили в Microsoft, этот инструмент был разработан для упрощения задач, повышения эффективности и предоставления полезной информации.

Вот визуальное представление того, к чему мне удалось получить доступ: Для вашего удобства четыре предложенных мной подсказки были наложены на платформу BWT. Вы можете увеличить масштаб, нажав на него.

Сейчас это кажется весьма полезным по сравнению с тем, когда я впервые попробовал это (несколько недель назад). В то время это не было особенно впечатляющим, но, похоже, с тех пор оно значительно улучшилось.

Смотрите также

2024-12-10 16:14

Google тестирует тренды и популярность среди ярлыков в результатах поиска

Как опытный эксперт по SEO с более чем десятилетним опытом работы за плечами, я должен сказать, что последнее тестирование Google меток и тегов в результатах поиска просто интригует. Включение таких трендовых ярлыков, как «в тренде» и «популярно среди», добавляет новое измерение к тому, как мы воспринимаем результаты поисковых систем.

Google продолжает экспериментировать с ярлыками и тегами в результатах поиска, такими как «трендовые» ярлыки, отображая альтернативы, такие как «трендовые рядом» или «популярно среди» ярлыков и тегов в сводках результатов поиска.

Броди Кларк и Сачин Патель нашли эти случаи и поделились ими вместе с некоторыми примерами на X и в своих заметках в поисковой выдаче. Позвольте мне поделиться с вами некоторыми из этих примеров:

Вот старые тренды этой недели и популярные на этой неделе:

Это определенно делает результаты поиска более заметными…

Смотрите также

2024-12-10 16:14