В поисковой системе «Яндексе» появилась возможность невербального запроса. Теперь пользователи могут искать картинки, которые целиком совпадают с имеющимися у них изображениями или содержат ее фрагменты. Новая возможность работает на технологии компьютерного зрения, созданной разработчиками компании, под названием «Сибирь» (от англ. CBIR – Content-based image retrieval, то есть поиск изображения по содержанию).
После того как пользователь загрузил картинку, поисковая машина превращает ее в набор визуальных слов (удобные для поиска численные представления ключевых элементов картинки – границы объектов, контрастные области и так далее). После этого поисковая машина выбирает среди известных ей миллиардов картинок изображения, содержащие такие же визуальные слова, как на загруженной картинке, отсекая все остальные. Потом компьютер сопоставляет расположение ключевых элементов на оставшихся изображениях и выстраивает их по близости к загруженной картинке так, что сверху оказываются наиболее похожие.