В приложении Яндекс теперь есть умная камера: в ней объединились технологии компьютерного зрения, машинного перевода и поиска. Камера умеет в реальном времени распознавать и искать предметы, которые попали в объектив. А ещё — переводить текст и сканировать документы.
Стоит навести на что-нибудь камеру, и она отметит объекты, которые смогла распознать. Про многие из них можно узнать, что это и где продаётся. Если понравился чей-то рюкзак, можно легко посмотреть, где купить такой же или похожий. Точно так же можно выяснить, как называется растение, порода собаки или, например, памятник архитектуры.
Приложение поможет перевести надпись на незнакомом языке. Если направить на неё камеру, Яндекс тут же переведёт её с помощью Яндекс.Переводчика.
Переведённый текст появится поверх изображения. Это удобно, если нужно понять, что написано на этикетке или, скажем, на указателе. В приложении также есть сканер: он позволяет сделать цифровую копию любого документа, будь то паспорт или диплом.
В основе умной камеры лежат технологии компьютерного зрения. С их помощью камера выделяет на изображении отдельные объекты и распознаёт, что перед ней — стол, стул или, например, комнатное растение. Для этого используются нейронные сети, обученные на огромном числе примеров. Также технологии компьютерного зрения позволяют найти и распознать надпись на картинке, которую нужно перевести.
Умная камера доступна в приложении Яндекс для iOS и Android. Чтобы её включить, нужно нажать на иконку камеры в поисковой строке.
