Как Google оценивает, переупорядочивает и выделяет ссылки на веб-страницах на основе их качества, популярности и CTR

Описание

Какую задачу решает

Патент решает проблему сложности навигации в документах с большим количеством ссылок (например, веб-каталогах). Пользователю трудно определить, какие ссылки ведут на наиболее качественные или важные ресурсы, особенно если они упорядочены произвольно (например, по алфавиту) и не имеют отличительных признаков. Изобретение призвано улучшить пользовательский опыт, выделяя высококачественные ссылки.

Что запатентовано

Запатентована система для динамической модификации представления ссылок (Entries) в документе. Система присваивает каждой ссылке оценку (Score), отражающую качество или важность целевого документа. На основе этих оценок система может переупорядочивать, визуально выделять, аннотировать или удалять ссылки перед показом документа пользователю.

Как это работает

Система перехватывает документ до его отображения. Это может происходить на стороне клиента (через плагин или Browser Assistant) или на стороне сервера.

1. Определение оценок: Для каждой ссылки определяется Score. Методы расчета включают ссылочный анализ (PageRank), кликабельность (Clickthrough rate), популярность (трафик), релевантность запросу или профилю пользователя.
2. Модификация документа: На основе оценок система изменяет представление ссылок: переупорядочивает их, визуально выделяет, удаляет ссылки ниже порога или аннотирует их (добавляет рейтинг, иконки, связанные ссылки).
3. Отображение: Модифицированный документ предоставляется пользователю.

Актуальность для SEO

Средняя/Низкая. Патент имеет очень ранний приоритет (1999 год). Клиентская реализация в виде Browser Assistant (например, Google Toolbar), модифицирующая сторонние сайты, устарела. Однако базовые концепции — оценка качества ссылок и их сортировка на основе важности — остаются фундаментальными. Они активно применяются Google на собственных ресурсах, например, при выборе и упорядочивании дополнительных ссылок (Sitelinks) в SERP.

Важность для SEO

Патент имеет среднее значение (6/10) для SEO. Он не описывает алгоритмы ранжирования SERP. Однако он имеет важное стратегическое значение, так как подтверждает, что Google использует комбинацию авторитетности (PageRank) и поведенческих сигналов (CTR, популярность) для оценки важности ссылок. Это критически важно для стратегий линкбилдинга (получение кликабельных ссылок) и оптимизации структуры сайта (например, для влияния на Sitelinks).

Детальный разбор

Термины и определения

Browser Assistant (Браузерный помощник)

Программное обеспечение на стороне клиента (плагин, тулбар, DLL), которое взаимодействует с браузером для перехвата и модификации документов перед отображением.

Clickthrough rate (CTR, Кликабельность)

Один из методов определения Score документа, основанный на количестве кликов по ссылке на этот документ за период времени.

Document (Документ)

Любой тип документа, например, веб-страница (HTML) или текстовый документ.

Entry (Запись)

Ссылка (Link) плюс связанная с ней информация (Link information), например, анкорный текст или описание.

Link (Ссылка)

Ссылка из одного документа в другой или в пределах одного документа (например, гиперссылка).

PageRank

Алгоритм оценки важности документа на основе входящих ссылок. Явно упоминается в патенте через ссылку на статью S. Brin et al. как один из методов расчета Score.

Score (Оценка)

Числовое значение, присваиваемое записи (Entry) или документу, отражающее его качество, важность или релевантность.

Ключевые утверждения (Анализ Claims)

Патент фокусируется на процессе модификации существующего документа на основе рассчитанных оценок.

Claim 1, 4 и 6 (Независимые пункты): Описывают систему (реализованную на сервере или устройстве), которая выполняет следующие действия:

1. Получение адреса документа, содержащего ссылки.
2. Определение Score для каждой ссылки в документе.
3. Модификация документа на основе этих оценок.
4. Предоставление модифицированного документа клиенту.

Критически важным аспектом является определение того, что именно включает модификация. Она должна включать комбинацию следующих обязательных действий:

• Переупорядочивание (reorder) двух или более ссылок на основе их Score. (В Claim 6 это описано как изменение первого порядка на второй).
• Удаление (delete) одной или более ссылок, чей Score ниже определенного порога (predetermined threshold).
• Для ссылок с Score выше порога — включение одной или нескольких дополнительных ссылок (additional links) на документы, связанные с целевым документом основной ссылки.

Ядро изобретения — это конкретный и обязательный набор действий по агрессивной модификации документа: сортировка по качеству, фильтрация низкокачественного контента и обогащение высококачественных ссылок дополнительным контекстом (связанными ссылками).

Где и как применяется

Изобретение описывает механизм, который применяется в момент запроса документа пользователем, но опирается на данные, обработанные на предыдущих этапах.

CRAWLING и INDEXING – Сканирование и Индексирование
На этих этапах система собирает данные и рассчитывает метрики, необходимые для Score. Это включает структуру ссылок (для PageRank), данные о популярности и логи кликов (для CTR). Эти оценки сохраняются для последующего использования.

Применение в реальном времени (Уровень Представления)
Основное применение происходит в момент доступа пользователя к документу. Патент описывает две реализации:

• Client-Side (На стороне клиента): Browser Assistant (например, тулбар или плагин) перехватывает HTML, запрашивает оценки у центрального сервера и модифицирует страницу локально.
• Server-Side (На стороне сервера): Сервер (прокси-сервер или сам контент-сервер) модифицирует документ перед отправкой пользователю. Это актуально для ресурсов, контролируемых Google. Например, если рассматривать SERP как документ, то механизм выбора и упорядочивания Sitelinks может базироваться на этой логике.

Входные данные:

• Запрошенный документ (HTML) и его URL.
• База данных с предварительно рассчитанными Scores для ссылок.
• (Опционально) Профиль пользователя или текущий запрос.

Выходные данные:

• Модифицированный документ с измененным порядком, стилем, аннотациями или набором ссылок.

На что влияет

• Конкретные типы контента: Любые документы, содержащие ссылки. Особо выделяются иерархические каталоги (hierarchical directories).
• SERP и Sitelinks: Механизм может применяться Google для выбора и упорядочивания дополнительных ссылок (Sitelinks) в поисковой выдаче.

Когда применяется

• Условия работы: Алгоритм активируется в момент запроса и загрузки документа пользователем.
• Триггеры активации: Активация Browser Assistant на клиенте или наличие функционала на сервере, обрабатывающем запрос.
• Пороговые значения: Используются пороги (threshold) для принятия решений об удалении ссылок (ниже порога) или добавлении аннотаций и связанных ссылок (выше порога).

Пошаговый алгоритм

Описаны два основных сценария работы.

Сценарий 1: Client-Side (Browser Assistant)

1. Идентификация документа: Браузер начинает загрузку документа по запросу пользователя.
2. Перехват данных: Browser Assistant перехватывает данные документа (HTML).
3. Определение оценок: Browser Assistant извлекает ссылки и определяет Score для каждой. Это может быть сделано локально или путем запроса к внешнему серверу.
4. Модификация документа (Опционально):
   • Переупорядочивание: Ссылки сортируются на основе их Scores.
   • Визуальное выделение/Удаление: Изменяются стили ссылок. Ссылки с оценками ниже порога могут быть удалены.
   • Аннотирование: К ссылкам добавляются оценки, иконки рейтинга или связанные ссылки (для ссылок выше порога).
5. Предоставление документа: Browser Assistant предоставляет модифицированный документ пользователю.

Сценарий 2: Server-Side

1. Получение запроса: Сервер получает запрос на документ.
2. Определение оценок: Сервер определяет Score для каждой ссылки в документе (самостоятельно или через запрос к другому серверу).
3. Модификация документа (Опционально): Сервер выполняет переупорядочивание, визуальное выделение/удаление и аннотирование ссылок.
4. Предоставление документа: Сервер отправляет модифицированный документ пользователю.

Какие данные и как использует

Данные на входе

Патент детально описывает различные типы данных, которые могут использоваться для расчета Score.

• Ссылочные факторы: Структура входящих ссылок. Используется для расчета Score на основе оценок документов, которые ссылаются на целевой документ. Явно упоминается техника из статьи S. Brin et al. (т.е. PageRank).
• Поведенческие факторы:
  • Clickthrough rate (CTR): Частота кликов по ссылке за период времени.
  • Популярность (Popularity): Популярность документа или сайта, определяемая по данным о трафике или анализу HTTP-трафика (например, логи веб-прокси).
  • История пользователя: Информация о ранее посещенных документах.
• Контентные факторы: Содержание целевого документа. Используется для оценки релевантности запросу или профилю пользователя.
• Пользовательские факторы:
  • Запрос пользователя (User query), который привел к доступу к документу.
  • Профиль пользователя (User profile): Набор слов из ранее посещенных документов с весами важности.

Какие метрики используются и как они считаются

Ключевой метрикой является Score (Оценка качества, важности или релевантности ссылки). В патенте перечислены следующие методы расчета:

• Ссылочный Score (PageRank): На основе анализа входящих ссылок.
• Поведенческий Score (CTR/Traffic): Функция от Clickthrough rate или популярности (трафика).
• Запросозависимый Score: На основе соответствия между User query и контентом документа.
• Персонализированный Score: На основе соответствия между User profile и контентом документа.

Пороговые значения (Thresholds): Используются для принятия решений о модификации (удаление ссылок ниже порога, добавление аннотаций выше порога).

Выводы

1. Оценка качества ссылок: Авторитетность + Использование: Патент демонстрирует фундаментальный подход Google к оценке важности ссылок. Score базируется не только на статической авторитетности (PageRank), но и на реальном использовании (CTR) и популярности (трафик).
2. Динамическая модификация для улучшения UX: Основная цель — улучшение пользовательского опыта и навигации, а не ранжирование в поиске. Система предназначена для динамического изменения порядка, видимости и представления ссылок на лету.
3. Актуальность для Sitelinks: Хотя клиентская реализация (Google Toolbar) устарела, серверная реализация актуальна для ресурсов Google. Механизм выбора и упорядочивания дополнительных ссылок (Sitelinks) в SERP с высокой вероятностью базируется на принципах этого патента (сортировка по важности и популярности).
4. Многофакторная и контекстная оценка: Score может быть динамическим, зависящим от контекста запроса пользователя или его персонального профиля (истории посещений).
5. Агрессивные методы модификации (Claims): Защищенное изобретение включает конкретный набор действий: обязательное переупорядочивание, удаление низкокачественных ссылок и добавление связанных ссылок к высококачественным.

Практика

Best practices (это мы делаем)

• Фокус на получении кликабельных ссылок (Линкбилдинг): Патент явно указывает Clickthrough rate (CTR) как метод оценки важности ссылки. Стратегия линкбилдинга должна фокусироваться на получении естественно размещенных ссылок, которые стимулируют реальные переходы пользователей, а не просто существуют для веса.
• Оптимизация для Sitelinks: Механизм патента, вероятно, используется для упорядочивания Sitelinks. Повышайте важность ключевых страниц сайта, чтобы они отображались в Sitelinks. Убедитесь, что эти страницы имеют высокий внутренний PageRank и популярность (трафик).
• Повышение общей авторитетности (PageRank) и Популярности: Поскольку PageRank и данные о трафике используются для расчета Score, продолжайте работу над построением качественного ссылочного профиля и общей популярностью бренда и ресурса.
• Улучшение внутренней перелинковки: Структурируйте внутренние ссылки так, чтобы вес и трафик эффективно направлялись на наиболее важные страницы, повышая их Score.

Worst practices (это делать не надо)

• Размещение ссылок в некликабельных зонах: Размещение ссылок (входящих или внутренних) там, где они не получают кликов (футеры, сквозные блоки). Если ссылки оцениваются по CTR, как описано в патенте, такие ссылки будут иметь низкий Score.
• Использование спамных каталогов и ссылок низкого качества: Фокус на количестве ссылок вместо их качества и реального использования неэффективен. Такие ссылки имеют низкий Score.
• Игнорирование структуры сайта: Хаотичная внутренняя перелинковка приводит к низким оценкам Score для важных страниц, уменьшая их шансы появиться, например, в Sitelinks.

Стратегическое значение

Патент подтверждает философию Google о том, что ценность ссылки складывается из ее авторитетности (статический сигнал, PageRank) и ее реального использования (поведенческий сигнал, CTR/популярность). Это подчеркивает важность User-Centric SEO. Стратегически важно понимать, что не все ссылки равны, и их представление (например, в Sitelinks) или ценность (в линкбилдинге) может динамически меняться в зависимости от их авторитетности и популярности.

Практические примеры

Сценарий 1: Стратегия линкбилдинга и CTR

1. Ситуация: Планируется размещение гостевого поста на авторитетном ресурсе.
2. Действие (на основе патента): Вместо ссылки в блоке «Об авторе», интегрируйте ссылку непосредственно в основной контент, где она контекстуально релевантна и имеет максимальный потенциал для получения кликов (высокий CTR).
3. Ожидаемый результат: Согласно патенту, ссылка с высоким CTR получит более высокий Score важности, что может положительно сказаться на ее ценности как сигнала ранжирования.

Сценарий 2: Оптимизация порядка Sitelinks

1. Ситуация: По брендовому запросу в Sitelinks отображаются не приоритетные категории, а служебные страницы (например, «Политика возврата»).
2. Анализ (на основе патента): Google определил Scores для внутренних страниц. Служебные страницы получили высокие оценки из-за большого количества внутренних ссылок (из футера) и/или высокой популярности.
3. Действия: Увеличить количество внутренних ссылок на приоритетные категории (меню, хлебные крошки, блог). Обеспечить высокий трафик и вовлеченность на этих страницах.
4. Ожидаемый результат: Scores приоритетных категорий увеличатся. Google переупорядочит Sitelinks, показывая эти категории выше или вместо служебных страниц.

Вопросы и ответы