"Яндекс" обновил поиск: изображения и текст анализируются вместе

Компания "Яндекс" анонсировала обновление функции поиска по изображениям, включающее анализ как самих картинок, так и текста на веб-странице. Об этом сообщила пресс-служба организации.

Нововведение в алгоритмы "Яндекса" позволяет анализировать одновременно изображение и сопровождающий его текст, тем самым улучшая результаты поиска, особенно в случаях противоречий между текстом и изображением

В ходе обновления специалисты включили мультимодальную технологию, которая изначально базируется на крупной модели. В последующем на её основе были созданы несколько компактных моделей, предназначенных для различных этапов обработки данных. Основные вычислительные операции, требующие значительных ресурсов, выполняются предварительно, благодаря чему система функционирует в режиме реального времени без увеличения времени отклика.

Ранее анализ отдельных изображений и текста проводился раздельно, однако теперь весь процесс осуществляется комплексно. Уже вскоре после внедрения обновления было замечено значительное увеличение числа релевантных изображений в верхней части поисковой выдачи, как подчеркнули в пресс-службе.