Как спроектировать структуры URL для AI-извлечения, а не только для ранжирования

от

Долгое время оптимизация веб-адресов (URL) была просто базовой технической задачей для поисковых систем. Распространенный совет заключался в том, чтобы сделать их краткими, использовать дефисы для разделения слов и включать ваше основное ключевое слово – и с этим было покончено.

Купил акции на все деньги, а они упали? А Илон Маск снова написал твит? Знакомо. У нас тут клуб тех, кто пытается понять этот цирк и не сойти с ума.

Купить на падении (нет)

Эта старая стратегия становится менее эффективной. Всё больше людей сейчас находят информацию с помощью инструментов искусственного интеллекта, таких как ChatGPT, Perplexity, Claude и Google’s AI Overviews.

Большие языковые модели (LLM) находят и используют информацию уникальным способом по сравнению с обычными поисковыми системами. Если ваш веб-сайт не структурирован в соответствии с тем, как работают LLM, то вероятность того, что они включат ваш контент при генерации ответов, снижается.

С ростом поисковых систем на базе ИИ, традиционные методы SEO нуждаются в обновлении, чтобы также хорошо работать с тем, как ИИ-боты исследуют веб-сайты.

Почему ИИ-системы по-разному читают URL-адреса

На протяжении десятилетий поисковые системы, такие как Google, создавали сложные системы для изучения и организации веб-пространства. Эти системы могут обрабатывать такие вещи, как перенаправления веб-сайтов, определять лучшую версию страницы и даже понимать, о чём идёт речь на странице, даже если её веб-адрес выглядит как хаотичная мешанина. Они также могут обрабатывать код, такой как JavaScript, хотя и не всегда.

ИИ-системы, которые находят и используют информацию, такие как те, которые объединяют поиск с генерацией текста на основе ИИ (RAG) или напрямую подключаются к интернету, не всегда работают одинаково.

Существуют три основных компонента работы RAG:

  1. Входной запрос преобразуется в векторное представление.
  2. Затем из проиндексированных URL-адресов, документов и графов знаний извлекаются соответствующие отрывки в традиционных результатах поиска, таких как Google и Bing.
  3. LLM, такой как ChatGPT или аналогичный, затем обработает эту информацию и сгенерирует уточненный ответ.

Эта технология расширяется, включая нечто под названием URL context grounding, функцию, уникальную для Gemini. Она позволяет Gemini (и, вероятно, AI Overviews или AI Mode) более эффективно понимать и отвечать на вопросы об информации, найденной на конкретной веб-странице, без необходимости сначала искать и извлекать дополнительную информацию.

Классификация без предварительного обучения — это метод, который позволяет моделям понимать, о чём веб-страница, без необходимости специального обучения для этой задачи.

Вместо того, чтобы нуждаться в предварительно размеченных данных, модель определяет, что это за вещи, изучая подсказки в веб-адресах – рассматривая их как обычный текст – и сопоставляя их с известными категориями. Она делает это, используя такие методы, как сравнение степени схожести адресов или задавая себе вопросы на основе содержания адреса.

Эта система определяет, о чём веб-страница, используя своё существующее понимание языка. Она также ищет конкретные слова и стили письма, которые указывают на содержание страницы.

Это было особенно полезно в обнаружении опасных ссылок, таких как фишинговые попытки, просто анализируя закономерности в их веб-адресах. Также предполагается, что большие языковые модели потенциально могут использовать свое понимание языка, чтобы определить, является ли ссылка релевантной или заслуживающей доверия, основываясь только на URL-адресе.

Когда веб-адрес не указывает явно на контент, на который он ведет, это затрудняет понимание и правильную категоризацию этого контента для моделей ИИ.

Чистый, описательный путь вызывает доверие так, как никогда не вызовет что-то вроде /p?id-4821.

Основной принцип URL как семантических сигналов

Ваша структура URL должна действовать как дополнительный слой информации о вашем контенте. Она чётко показывает, как организованы темы, от широких категорий до конкретных деталей, отдельно от таких вещей, как заголовки страниц или разделы.

Это полезный индикатор того, как ИИ-системы работают, чтобы определить, откуда поступает информация и насколько она релевантна, прежде чем представить её в своих ответах.

Это имеет особое значение для:

  • Длинные и вопросительные запросы, где системы искусственного интеллекта ищут точные совпадения с конкретными информационными потребностями.
  • Тематический авторитет, где ваша иерархия URL может подтвердить, что ваш домен владеет определенной предметной областью.
  • Качество цитирования, где описательный URL повышает вероятность того, что AI-агент сошлется на ваш контент, а не на почти идентичную страницу конкурента.

Практические принципы архитектуры

При проектировании поисковых систем – будь то традиционные или работающие на базе ИИ – следует помнить о нескольких ключевых архитектурных принципах.

Используйте логичную, неглубокую иерархию.

Как SEO-эксперт, я всегда говорю клиентам поддерживать чистыми и простыми URL-адреса их веб-сайтов. Глубоко вложенные URL-адреса – например, /blog/category/subcategory/year/month/post-title/ – создают то, что мы называем ‘шумом’ и затрудняют поисковым системам (и пользователям!) понимание содержания страницы. Как правило, трёхуровневой структуры – *domain > category > specific page* – вполне достаточно. Сейчас некоторые платформы, такие как Shopify, иногда вынуждают вас использовать более глубокие структуры из-за ограничений темы, потенциально доходя до четырёх или пяти уровней (например, domain/blog/name-of-blog/blog-post-title/). Это нормально, если эти дополнительные уровни добавляют реальную ценность и контекст для пользователя, а не просто административные данные. Ключ в том, чтобы отдавать приоритет ясности и избегать ненужной сложности.

Сделайте каждый сегмент понятным для человека и описательным.

При создании веб-адресов (URL) для публики используйте ясный и описательный язык вместо сокращений, внутренних терминов или кодов. Например, URL-адрес, такой как /ai-search-optimization, сразу говорит вам, о чём страница, в то время как что-то вроде /aso-v2 бессмысленно, если вы уже не знаете, к чему оно относится.

Согласуйте URL-адреса со фактическим поисковым намерением, а не только с ключевым словом.

Существует значительная разница между общим поиском по запросу ’email marketing’ и поиском по запросу ’email marketing best practices for B2B’. Более конкретный поисковый запрос, скорее всего, появится, когда ИИ отвечает на подробный вопрос, поскольку URL немедленно фокусирует поиск ИИ, прежде чем он даже изучит содержание страницы.

Будьте последовательны в наименовании категорий на всем вашем сайте.

Если вы используете определенные разделы своего веб-сайта – например, /guides/ для подробных статей и /blog/ для быстрых обновлений – сохраняйте эту структуру последовательной. Инструменты поиска на базе искусственного интеллекта изучают, как организован ваш сайт, и изменение структуры может сбить их с толку относительно того, где найти различные типы контента.

Избегайте переспама ключевыми словами в URL.

Несмотря на то, что это распространенный SEO-совет, он по-прежнему актуален сегодня. URL, переполненный ключевыми словами, может показаться ненадежным людям, которые видят его в ответе, сгенерированном ИИ, сводя на нет цель построения доверия. Лучше всего сосредоточиться на одном основном ключевом слове или фразе для каждой части URL.

Как это выглядит на практике?

Как человек, который разрабатывал и управлял веб-сайтами на протяжении многих лет, я узнал, что структура ваших URL-адресов действительно важна, особенно сейчас, с этими системами Retrieval-Augmented Generation (RAG). Если несколько человек освещают одну и ту же тему, чёткий и логичный URL-адрес может оказать огромную помощь RAG, чтобы понять *точно*, о чём страница, и извлечь правильную информацию. Всё дело в том, чтобы предоставить системе контекст, необходимый для извлечения наилучшего контента.

Пример:

Маркетолог A публикует /blog/2024/03/email-tips-part-4.

Людям будет более полезен этот URL, потому что сразу понятно, о чём он.

Наличие чёткой и хорошо определённой структуры URL и организации веб-сайта может значительно улучшить то, как поисковые системы и пользователи понимают контент вашего сайта. Это не только помогает установить ваш сайт как авторитетный источник по его темам, но и делает его более релевантным для поисковых запросов пользователей.

Проблема перенаправления и консолидации

Это особенно важно для более крупных веб-сайтов, накопивших проблемы со своими веб-адресами, такие как старые перенаправления, повторяющиеся страницы и непоследовательные URL-адреса, часто вызванные переключением систем управления контентом с течением времени.

Перенаправления и дублированный контент могут вызывать проблемы для поисковых систем на основе искусственного интеллекта. Веб-краулеры могут не всегда находить основную версию страницы, и различные поисковые системы обрабатывают перенаправления по-разному, что приводит к непоследовательным результатам.

Чтобы быстро улучшить ваш веб-сайт, сосредоточьтесь на ваших самых важных страницах. Проверьте URL-адреса ваших самых популярных и ценных страниц, чтобы убедиться, что они простые, легко находятся и организованы таким образом, который имеет смысл для структуры вашего сайта.

Затем работайте в обратном направлении.

Вам не обязательно перерабатывать свой веб-сайт, чтобы потенциально появиться в ответах, сгенерированных ИИ. Однако для ваших самых важных страниц крайне важно убедиться, что вы отправляете сильные сигналы через свои URL.

Чего следует избегать при изменении

Не вносите резких изменений в URL-адреса вашего веб-сайта только ради небольшого улучшения того, как ИИ находит информацию. Лучше избегать больших изменений ради незначительных преимуществ.

Изменение URL-адресов вашего сайта может быть рискованным для поисковой оптимизации и потребовать времени для восстановления рейтинга вашего сайта, если перенаправления не настроены должным образом. Существует множество примеров неудачных миграций сайтов, доказывающих, насколько важно правильное внедрение.

Мы стремимся использовать эти рекомендации при создании нового контента и выявлять любые структурные проблемы на наших важных существующих страницах. Мы будем уделять приоритетное внимание исправлению этих проблем, когда это просто и не несет больших рисков.

Как SEO-эксперт, я часто говорю клиентам, что хорошо структурированный веб-сайт – это ключ к успеху. Если вы уже создали свои URL-адреса чистыми, описательными и организованными в логической иерархии – и вам следовало бы делать это в любом случае как стандартную SEO-практику – то вы уже закладываете основу для успеха в том, как ИИ обнаруживает и понимает ваш контент! Вы оптимизировали для извлечения данных ИИ, даже не осознавая этого, что просто фантастично.

В итоге

Хотя веб-адреса (URL) не были основным фактором ранжирования в прошлом, они могут стать более важными, поскольку люди все чаще используют ИИ-помощников для поиска информации. Это связано с тем, что ИИ-помощники могут делиться или ссылаться на URL в большем количестве мест, чем традиционные поисковые системы, такие как Google и Bing.

Эти инструменты могут повысить вашу видимость в ответах ИИ, улучшить способ цитирования ваших работ и даже повлиять на то, как поисковые системы изначально понимают и категоризируют ваш контент.

Просто создавайте URL-адреса, которые чётко рассказывают историю вашего контента до того, как пользователь на него нажмёт.

Смотрите также

2026-05-06 15:15