«Яндекс» обновил алгоритмы поиска по картинкам, теперь система одновременно анализирует изображение и текст на странице, где оно размещено. Это позволяет учитывать возможные расхождения между фотографией и её описанием, рассказали Хабру в пресс‑службе компании.

Раньше «Поиск» анализировал изображение и текст отдельно. Теперь эти данные оценивают вместе. В результате система должна точнее определять объект на фотографии в случаях, когда текстовое описание содержит ошибку или относится к другой модели.

Изменение актуально для поиска товаров, автомобилей, смартфонов, одежды, мебели и других объектов, которые могут быть похожи друг на друга. Например, если на странице показана фотография одной модели телефона, а в описании указана другая, алгоритм может определить модель по самому изображению и учесть это при формировании результатов.

Найти нужную модель телефона, дивана или автомобиля стало проще — «Яндекс» обновил «Поиск по картинкам»

Алгоритмы «Поиска по картинкам» «Яндекса» научились одновременно анализировать изображение и текст на странице, чтобы еще точнее понимать, что именно ищет человек. Новая технология позволяет улучшить результаты в тех случаях, когда текст в описании картинки противоречит самому изображению. Это особенно полезно на запросах о конкретных вещах — например, о модели дивана, телефона или автомобиля, где в описаниях часто путают похожие модели. Об этом CNews сообщили представители «Яндекса».

Обновление особенно заметно при поиске товаров, автомобилей, техники, одежды, мебели и других объектов, которые внешне похожи друг на друга. Например, если на странице опубликована фотография одной модели телефона, а в тексте упоминается другая, поиск с большей вероятностью распознает, какая модель изображена на самом деле.

«Яндекс» обновил поиск по изображениям, добавив одновременный анализ самой картинки и текста, который сопровождает ее на странице.

В компании утверждают, что это позволит точнее определять содержание изображений, особенно в случаях, когда подпись или описание не соответствует тому, что показано на фотографии.

Алгоритмы поиска по картинкам "Яндекса" научились одновременно анализировать изображение и текст на странице. <…> Новая технология позволяет улучшить результаты в тех случаях, когда текст в описании картинки противоречит самому изображению.

Что пишут другие издания

  • CNews: Найти нужную модель телефона, дивана или автомобиля стало проще — «Яндекс» обновил «Поиск по картинкам»
  • iXBT: «Яндекс» научил поиск по картинкам одновременно понимать фото и текст