Google анализирует медиаконтент (например, эпизоды сериалов или обучающих курсов), чтобы автоматически понять, какие эпизоды связаны между собой. Изучая фрагменты повторов, транскрипты и визуальные элементы (включая распознавание лиц), система строит «Граф …
Мультимедиа
Google улучшает точность распознавания лиц в визуальном поиске, анализируя не только визуальное сходство, но и метрики социальной связанности (social connection metrics) между пользователем, отправившим запрос, и потенциальным кандидатом. Ранжирование учитывает …
Google использует систему для улучшения взаимодействия с изображениями в поиске. Анализируя запрос, исторические данные о поведении пользователей и личные предпочтения, система определяет наиболее релевантные объекты или детали на изображении. Эти …
Google может использовать историю местоположений устройства пользователя (GPS-логи или чекины) для поиска в интернете фотографий, сделанных другими людьми в тех же местах и в то же время. Система находит изображения …
Google использует интерфейс "стена видео", отображающий множество роликов одновременно в виде версий с низкой частотой кадров (например, 1 кадр в секунду). Это позволяет пользователям быстро оценить содержание видео без когнитивной …
Google использует метод квантования "Shape-Gain" для повышения точности и скорости поиска похожих изображений. Система разделяет векторы признаков на направление (Shape/Форма, определяющее визуальный паттерн) и магнитуду (Gain/Усиление, определяющее интенсивность). Раздельное кодирование …
Google патентует механизм для понимания голосовых запросов, заданных во время просмотра видео (например, "Кто этот актер?"). Система синхронизирует мобильное устройство с устройством воспроизведения, фиксируя точную временную метку и идентификатор контента …
Google использует механизм для обеспечения визуальной согласованности между 3D-моделями и 2D-изображениями в результатах поиска. Система определяет наиболее релевантное 2D-изображение по запросу и алгоритмически подбирает начальный ракурс (Initial Viewing Angle) 3D-модели …
Google патентует систему для автоматического создания форматированных "поисковых журналов" о трендовых темах. Система идентифицирует тренд, ищет новостные статьи, пользовательский контент (соцсети, фото, видео) и справочную информацию по теме, а затем …
Система Google для автоматического преобразования текстовых объявлений в графические. Для определения контекста система глубоко анализирует контент посадочной страницы с помощью кластеризации, а также учитывает текст объявления и ключевые слова для …
Google использует систему визуализации для поиска по картинкам, которая группирует похожие изображения на основе визуальных признаков и метаданных и отображает их в масштабируемом 2D-интерфейсе. При отдалении (zoom-out) система показывает меньше …
Патент описывает систему постобработки OCR, которая повышает точность индексации отсканированных документов и изображений. Google группирует похожие по форме символы в кластеры и сравнивает их, чтобы автоматически выявить и исправить ошибки …
Google использует механизм для оптимизации поиска по картинке. Система заранее определяет, какой визуальный признак (измерение) лучше всего имитирует "идеальное" ранжирование, полученное с помощью дорогостоящей кластеризации. Это позволяет быстро группировать похожие …
Google использует географическое положение пользователя для выбора наиболее подходящей языковой модели при распознавании текста (OCR) на изображениях (визуальных запросах). Это позволяет системе учитывать региональные различия в языке (например, орфографию или …
Патент Google, описывающий инфраструктурный механизм для автоматической оптимизации систем векторного поиска (Approximate Nearest Neighbor, ANN). Система использует математическое моделирование и метод множителей Лагранжа для нахождения оптимального баланса между скоростью ответа …
Google использует многоэтапный процесс для создания компактного цифрового отпечатка, представляющего всю продолжительность видео. Это включает анализ небольших сегментов (суб-отпечатки), обобщение их характеристик (гистограммы) и применение взвешенного хеширования. Это позволяет Google/YouTube …
Патент Google, описывающий инфраструктуру поиска по изображениям. Система разбивает изображения на "визуальные слова" (признаки) и использует инвертированный индекс (posting lists) для быстрого поиска совпадений. Ключевая особенность — хранение геометрических данных …
Анализ патента Google, описывающего систему поиска похожих людей. Система анализирует изображение человека, извлекает визуальные признаки и одновременно определяет биографические классификации (например, пол, возраст, этническую принадлежность) на основе связанного текста и …
Патент Google, описывающий инфраструктурный механизм для сравнения медиаконтента (видео, изображений) в больших масштабах. Система преобразует сложные, многомерные векторы признаков в компактные разреженные бинарные векторы на основе относительного ранжирования признаков. Это …
Google патентует интерфейс для показа связанных сайтов во время просмотра пользователем веб-страницы. Система определяет похожие сайты на основе текстового и визуального сходства. Результаты отображаются в виде миниатюр (превью), которые при …