Как Google использует данные о кликах пользователей (CTR и Click Ratio) для определения официального сайта по навигационным запросам

Описание

Какую задачу решает

Патент решает проблему, когда стандартные алгоритмы ранжирования могут не помещать «авторитетную» (authoritative web page) или официальную страницу на первую позицию по соответствующему запросу. Например, по запросу, содержащему имя актера, в топ могут попасть новостные сайты из-за недавних событий, в то время как биография или официальный сайт актера (авторитетная страница) окажутся ниже. Изобретение призвано гарантировать, что пользователи смогут легко идентифицировать и получить доступ к авторитетной странице, связанной с их запросом.

Что запатентовано

Запатентована система для автоматической идентификации авторитетных веб-страниц для конкретных запросов путем анализа поведения пользователей в журналах запросов (Query Logs). Суть изобретения заключается в использовании специфических поведенческих метрик — Click-Through Rate (CTR) и Click Ratio — для определения того, какой результат пользователи коллективно считают наиболее авторитетным или официальным ответом на запрос. Если эти метрики превышают определенные пороги для популярного запроса, страница помечается как авторитетная.

Как это работает

Система работает путем офлайн-анализа журналов запросов:

• Сбор данных: Извлекаются данные о запросах, показанных результатах и кликах пользователей.
• Фильтрация: Отсеиваются запросы с низкой частотностью (Query Count).
• Расчет метрик: Для топовых результатов по популярным запросам рассчитываются CTR (клики на результат / общее число запросов) и Click Ratio (клики на результат / общее число кликов по всем результатам запроса).
• Идентификация авторитетности: Результат признается авторитетным, если (Query Count выше порога 1) И ((CTR выше порога 2) ИЛИ (Click Ratio выше порога 3)).
• Хранение: Связка <запрос, адрес, заголовок> сохраняется в репозитории авторитетных страниц.
• Применение: При получении запроса пользователя система проверяет репозиторий и, если авторитетная страница найдена, отображает ее на SERP с визуальным выделением (на «более заметной позиции»).

Актуальность для SEO

Высокая. Идентификация навигационного интента и определение официальных источников (брендов, организаций) остается фундаментальной задачей поисковых систем. Механизм, основанный на анализе коллективного поведения пользователей для определения «официального» ответа, является классическим и надежным подходом, который, вероятно, продолжает использоваться в той или иной форме.

Важность для SEO

Патент имеет высокое значение (8/10) для SEO, особенно в контексте управления брендом и навигационными запросами. Он демонстрирует, что «владение» брендовым запросом определяется не только стандартными факторами ранжирования, но и, в первую очередь, поведением пользователей. Если пользователи преимущественно кликают на другой сайт (например, агрегатор, реселлер или Wikipedia) по вашему брендовому запросу, Google может идентифицировать этот сайт как авторитетный ответ, что критически снижает видимость и трафик официального сайта.

Детальный разбор

Термины и определения

Authoritative Web Page (Авторитетная веб-страница)

Веб-страница, которой доверяют пользователи, отправляющие определенный запрос, или страница, содержащая большой объем информации по теме запроса. В контексте патента — это страница, идентифицированная системой как основной/официальный ответ на запрос на основе поведенческих метрик.

Click Ratio (Коэффициент кликов)

Метрика, рассчитываемая как (Количество кликов на конкретный результат) / (Общее количество кликов на ЛЮБОЙ результат по данному запросу). Показывает долю кликов, которую забирает конкретный результат.

Click-Through Rate (CTR, Рейтинг кликов)

Метрика, рассчитываемая как (Количество кликов на конкретный результат) / (Общее количество отправок данного запроса). Показывает вероятность клика на результат при вводе запроса.

Query Log (Журнал запросов)

Хранилище данных о прошлых запросах, показанных результатах, позициях результатов и действиях пользователей (кликах/выборах).

Query Count (Счетчик запросов)

Количество раз, когда определенный поисковый запрос был отправлен пользователями за определенный период времени.

Query-Address-Title Repository (Репозиторий Запрос-Адрес-Заголовок)

База данных, хранящая идентифицированные связи между запросами и авторитетными страницами (их URL и заголовками).

Selection Count (Счетчик выборов)

Количество раз, когда конкретный результат был выбран (кликнут) пользователями.

Ключевые утверждения (Анализ Claims)

Claim 1 (Независимый пункт): Описывает основной метод идентификации авторитетной страницы.

1. Система извлекает информацию из Query Log для поискового запроса (включая данные о запросе и результатах).
2. Система определяет множество метрик (plurality of metrics), основанных на выборе конкретного результата поиска, когда он был предоставлен в ответ на этот запрос.
3. Эти метрики должны включать:
   • Query Count (частотность запроса) выше первого порога.
   • И по крайней мере одно из следующего:
     • Click-Through Rate (CTR) для этого результата выше второго порога.
     • Click Ratio для этого результата выше третьего порога.
4. На основании этих метрик система определяет, что данный результат соответствует authoritative web page для этого запроса.
5. После идентификации авторитетной страницы система определяет ее заголовок (Title).

Ядром изобретения является точное определение условий, при которых страница считается авторитетной: это комбинация популярности запроса И высокого уровня вовлеченности пользователей (через CTR или Click Ratio) с конкретным результатом.

Claim 5 (Зависимый): Детализирует расчет CTR.

CTR рассчитывается путем деления количества выборов (кликов) конкретного результата на количество отправок запроса за определенный период времени.

Claim 6 (Зависимый): Детализирует расчет Click Ratio.

Click Ratio рассчитывается путем деления количества выборов (кликов) конкретного результата на общее количество выборов любого результата по данному запросу за определенный период времени.

Claim 7 (Зависимый): Описывает применение результата.

Система предоставляет пользователю документ с результатами поиска, где информация об идентифицированной авторитетной странице (включая заголовок и ссылку) представлена на более заметном месте (more prominent location), чем информация о других результатах.

Где и как применяется

Изобретение затрагивает несколько этапов поиска, разделяясь на офлайн-анализ и онлайн-применение.

QUNDERSTANDING – Понимание Запросов (Офлайн-анализ)
Основная логика патента реализуется на этом этапе в виде периодического офлайн-процесса. Система анализирует исторические данные из Query Logs, рассчитывает поведенческие метрики (CTR, Click Ratio) и строит Query-Address-Title Repository. Это процесс глобального анализа интентов и поведения пользователей.

METASEARCH – Метапоиск и Смешивание / RERANKING – Переранжирование (Онлайн-применение)
В реальном времени, когда пользователь вводит запрос, система выполняет следующие действия:

1. Проверка репозитория: Система проверяет, существует ли запись для данного запроса в Query-Address-Title Repository.
2. Изменение SERP: Если запись найдена, система модифицирует страницу результатов поиска (SERP). Авторитетный результат извлекается и форматируется для отображения на заметной позиции (например, над органическими результатами) и/или с визуальным выделением (например, меткой «Authoritative page»).

Входные данные (Офлайн):

• Query Log (запросы, URL результатов, позиции, клики).
• Репозиторий Адрес-Заголовок (для получения заголовков идентифицированных страниц).

Выходные данные (Офлайн):

• Query-Address-Title Repository (база авторитетных страниц).

Входные данные (Онлайн):

• Запрос пользователя.
• Стандартный набор органических результатов.
• Данные из Query-Address-Title Repository.

Выходные данные (Онлайн):

• Модифицированная SERP с выделенным авторитетным результатом.

На что влияет

• Специфические запросы: Наибольшее влияние оказывается на Навигационные запросы (бренды, названия организаций, имена известных личностей, названия продуктов). Это запросы, где пользователи ищут конкретный, известный им ресурс.
• Конкретные типы контента: Влияет на официальные сайты, главные страницы организаций, страницы биографий (например, на Wikipedia), официальные страницы продуктов.

Когда применяется

Алгоритм идентификации (офлайн) применяется при выполнении строго определенных условий для конкретной пары Запрос-Результат:

• Условие 1 (Популярность запроса): Query Count за определенный период (например, 180 дней) должен превышать первый порог (например, 1000 запросов).
• Условие 2 (Вовлеченность пользователя): Должно выполняться ХОТЯ БЫ ОДНО из следующих условий:
  • CTR результата превышает второй порог (например, 0.4000).
  • Click Ratio результата превышает третий порог (например, 0.5000).

Алгоритм отображения (онлайн) применяется, когда введенный пользователем запрос точно соответствует запросу, для которого в репозитории уже сохранена авторитетная страница.

Пошаговый алгоритм

Процесс А: Офлайн-идентификация авторитетных страниц

1. Извлечение данных: Система извлекает информацию из Query Log, идентифицируя запросы, показанные результаты и количество выборов (Selection Count) для каждого результата за определенный период.
2. Фильтрация запросов: Отсеиваются запросы, чей Query Count ниже первого порога (Threshold 1).
3. Выбор кандидата: Для оставшихся запросов выбирается кандидат (например, начиная с первого результата в выдаче).
4. Расчет метрик для кандидата:
   • Рассчитывается CTR = (Клики на кандидата) / (Query Count).
   • Рассчитывается Click Ratio = (Клики на кандидата) / (Общее число кликов по всем результатам запроса).
5. Проверка условий авторитетности: Проверяется, удовлетворяет ли кандидат условию: (Query Count > Threshold 1) AND ((CTR > Threshold 2) OR (Click Ratio > Threshold 3)).
6. Принятие решения:
   • Если ДА: Кандидат идентифицируется как Authoritative Web Page для данного запроса. Система переходит к шагу 8.
   • Если НЕТ: Кандидат не является авторитетной страницей.
7. Проверка следующих результатов (Опционально): Система может проверить следующий по рангу результат (вернуться к шагу 3), пока не найдет авторитетную страницу или не достигнет лимита проверок. Если авторитетная страница не найдена, запрос помечается как не имеющий авторитетной страницы.
8. Получение заголовка: Для идентифицированной авторитетной страницы система извлекает ее заголовок (Title) из репозитория Адрес-Заголовок.
9. Сохранение: Связка <Запрос, Адрес, Заголовок> сохраняется в Query-Address-Title Repository.

Процесс Б: Онлайн-отображение авторитетной страницы

1. Получение запроса: Система получает запрос от пользователя.
2. Поиск в репозитории: Система ищет соответствие запросу в Query-Address-Title Repository.
3. Получение результатов: Параллельно генерируется стандартный набор поисковых результатов.
4. Форматирование SERP: Если авторитетная страница найдена в репозитории, система форматирует SERP, размещая авторитетную страницу на заметной позиции (например, выше всех остальных результатов) и применяя визуальное выделение (например, разделитель, специальный текст).
5. Предоставление SERP: Модифицированная SERP отправляется пользователю.

Какие данные и как использует

Данные на входе

Патент полностью сосредоточен на анализе поведенческих данных из журналов запросов.

• Поведенческие факторы: Это ключевые данные для работы алгоритма.
  • Отправки запросов (Submissions): Используются для расчета Query Count и CTR.
  • Клики (Selections/Clicks): Используются для расчета CTR и Click Ratio.
• Технические факторы:
  • URL (Address): Адрес результата, который оценивается как кандидат.
• Контентные факторы:
  • Заголовки (Titles): Заголовок авторитетной страницы извлекается после ее идентификации для отображения на SERP.

Другие факторы (ссылочные, контентные, технические) в данном патенте не упоминаются и не используются для идентификации авторитетности.

Какие метрики используются и как они считаются

• Query Count: Общее количество отправок запроса за период.
• Click-Through Rate (CTR): $CTR = \frac{\text{Клики на результат}}{\text{Общее число запросов}}$
• Click Ratio: $\text{Click Ratio} = \frac{\text{Клики на результат}}{\text{Общее число кликов по запросу}}$
• Пороговые значения: Система использует три конфигурируемых порога (Threshold 1, 2, 3) для Query Count, CTR и Click Ratio соответственно.

Выводы

1. Авторитетность определяется поведением пользователей: В контексте этого патента (преимущественно для навигационных запросов) «авторитетность» определяется не экспертностью контента или ссылками, а коллективным предпочтением пользователей. Сайт, который получает подавляющее большинство кликов, считается авторитетным ответом.
2. Критичность поведенческих метрик (CTR и Click Ratio): Патент выделяет две ключевые метрики. Высокий CTR указывает на высокую релевантность и удовлетворенность. Высокий Click Ratio указывает на доминирование результата над всеми остальными вариантами. Достаточно превысить порог по одной из этих метрик (при условии популярности запроса).
3. Переопределение стандартного ранжирования: Механизм позволяет системе идентифицировать авторитетную страницу и принудительно разместить ее на заметной позиции, даже если стандартные алгоритмы ранжирования поместили ее ниже (например, из-за временных трендов или новостей).
4. Зависимость от офлайн-анализа: Идентификация авторитетных страниц происходит не в реальном времени, а в ходе периодического анализа исторических логов. Это означает, что изменения в поведении пользователей будут отражены с задержкой.
5. Защита от нерелевантных запросов: Использование порога Query Count гарантирует, что система не будет пытаться найти авторитетные страницы для редких или случайных запросов, где данные статистически недостоверны.

Практика

Best practices (это мы делаем)

• Максимизация CTR по брендовым запросам: Критически важно гарантировать, что официальный сайт является наиболее привлекательным результатом по запросам, содержащим название бренда/компании. Оптимизируйте Title и Description, чтобы они четко указывали на официальный статус и мотивировали пользователя кликнуть именно на ваш сайт.
• Мониторинг Click Ratio по брендовым запросам: Необходимо отслеживать не только CTR, но и долю кликов, которую получает официальный сайт относительно других результатов (конкурентов, реселлеров, агрегаторов, Wikipedia). Цель — доминировать в кликах (высокий Click Ratio), чтобы система идентифицировала ваш сайт как авторитетный.
• Консолидация навигационного интента: Убедитесь, что пользователи, ищущие ваш бренд, попадают на одну основную страницу (обычно главную). Избегайте фрагментации интента по множеству страниц, так как это может размыть сигналы CTR и Click Ratio для каждой отдельной страницы.
• Обеспечение технической доступности и скорости: Если официальный сайт медленно загружается или недоступен, пользователи будут выбирать другие результаты. Это приведет к падению Click Ratio и потенциальной потере статуса авторитетной страницы по собственному брендовому запросу.

Worst practices (это делать не надо)

• Игнорирование поведения пользователей на SERP: Фокусироваться только на позициях по брендовым запросам недостаточно. Если позиция №1 занята вашим сайтом, но пользователи предпочитают кликать на результат №2 (например, из-за более удачного сниппета или негативного фона вокруг бренда), вы рискуете потерять статус авторитетного источника.
• Создание путаницы в брендинге: Использование разных названий или наличие нескольких сайтов, которые могут конкурировать за один и тот же навигационный запрос, может привести к тому, что ни один из них не достигнет пороговых значений CTR/Click Ratio.
• Манипуляции с CTR для получения статуса авторитетности: Попытки искусственно накрутить CTR или Click Ratio для небрендовых запросов с целью получения статуса авторитетной страницы, вероятно, будут неэффективны, так как система ищет естественное доминирование, характерное для навигационного интента, и может иметь защитные механизмы против накруток.

Стратегическое значение

Патент подтверждает стратегическую важность поведенческих факторов в определении релевантности и авторитетности для определенных типов запросов. Для SEO-стратегии это означает, что владение собственными брендовыми запросами является фундаментом, который требует постоянного мониторинга и оптимизации не только сайта, но и его представления на SERP. Система демонстрирует, как Google использует «мудрость толпы» (данные о кликах) для валидации и, при необходимости, корректировки результатов своего алгоритмического ранжирования.

Практические примеры

Сценарий: Потеря статуса авторитетного сайта из-за кризиса

1. Ситуация: Крупный банк (BrandBank) сталкивается с негативными новостями о нарушении безопасности.
2. Поведение пользователей: Пользователи ищут «BrandBank», но вместо того, чтобы кликать на официальный сайт brandbank.com (Результат №1), они массово кликают на новостные сайты и статьи в Wikipedia (Результаты №2-5), чтобы узнать подробности скандала.
3. Изменение метрик: CTR и Click Ratio для brandbank.com резко падают ниже пороговых значений (Threshold 2 и 3).
4. Офлайн-анализ Google: При следующем анализе логов система определяет, что brandbank.com больше не удовлетворяет условиям авторитетности для запроса «BrandBank».
5. Результат: Google удаляет специальное выделение для brandbank.com на SERP. Если ситуация сохранится, система может даже идентифицировать другую страницу (например, статью в Wikipedia о банке) как новый авторитетный результат, если ее Click Ratio станет доминирующим.
6. Действия SEO: Банку необходимо работать над восстановлением доверия и оптимизировать сниппеты, чтобы вернуть клики на официальный сайт, например, добавив в Description информацию о мерах безопасности, чтобы перехватить интент пользователей.

Вопросы и ответы