Как опытный эксперт по SEO, я считаю, что это полезный совет для владельцев веб-сайтов, которые используют сеть доставки контента (CDN) и хотят управлять только одним файлом robots.txt вместо двух отдельных. Перенаправление файла robots.txt вашего основного сайта в CDN позволяет вам контролировать все правила из одного места, что упрощает отслеживание ограничений доступа к вашему сайту для сканеров поисковых систем.
Если у вас есть сеть доставки контента (CDN) для части или всего вашего веб-сайта, и вы предпочитаете управлять только одним файлом «robots.txt» вместо того, чтобы работать как с файлами вашего веб-сайта, так и с файлами CDN, Гэри Иллиес из Google предложил подход. : просто перенаправьте файл robots.txt вашего основного сайта на CDN и управляйте им там.
Гэри написал в LinkedIn:
У вас есть CDN и основной сайт. У вас есть два файла robots.txt: один по адресу https’¶//cdn’¤example’¤com/robots.txt и один по адресу https’¶//www’¤example’¤com/robots.txt. У вас может быть только один центральный файл robots.txt со всеми правилами, скажем, в вашей CDN, который может помочь вам отслеживать все правила, которыми вам нужно управлять. Все, что вам нужно сделать, это перенаправить https’¶//www’¤example’¤com/robots.txt на https’¶//cdn’¤example’¤com/robots.txt, и сканеры, соответствующие RFC9309, будут просто использовать целью перенаправления является файл robotstxt https’¶//www’¤example’¤com/. Странно что ли.
Это не стратегия SEO для улучшения рейтинга, а просто метод объединить все ваши файлы robots.txt в один и избежать управления несколькими файлами.
Как опытный веб-мастер, я столкнулся с рекомендацией переместить мой файл robots.txt в сеть доставки контента (CDN) для облегчения доступа и управления. Однако обратите внимание, что это действие не дает никаких преимуществ в области SEO или рейтинга. Вместо этого он упрощает процесс поддержки одного согласованного файла на нескольких серверах. Имейте в виду, что если вы в какой-то момент решите покинуть CDN, обработка перехода будет аналогична смене хостинг-провайдера.
Смотрите также
- Google Ads разрешит рекламу курьеров по фэнтези-спорту и лотереям во многих штатах
- Спросите SEO-специалиста: какие ресурсы лучше всего подходят для изучения SEO и за кем лучше всего следить в Интернете, чтобы получить хороший совет? через @sejournal, @HelenPollitt1
- Консоль поиска Google работает над устранением задержек и задержек в работе поиска
- Руководство по стратегии органического SEO: как повысить видимость в поиске и стимулировать рост
- Google назвал точную причину, почему негативное SEO не работает
- Нет – Reddit не блокирует поиск в Google
- Реклама местных услуг Google теперь на мобильных устройствах Local Business Finder
- Использование потребителями социальных сетей (опять) меняется
- В Google Ads появился новый флажок: измененный или синтетический контент
- Задержки в консоли поиска Google не являются обновлением ядра Google
2024-07-05 15:14