Русский
English
Что там опять
Алиса AI сможет лучше помогать незрячим пользователям
Компания Яндекс адаптировала Live-режим в мобильном приложении «Алиса AI», чтобы помочь незрячим и слабовидящим людям. Теперь они могут задавать вопросы нейросети в реальном времени, чтобы узнать, что их окружает. Например, узнать, с какой стороны находится вход в магазин, какое сообщение отображается на экране стиральной машины и многое другое.
Live-режим помогает людям с ограниченными возможностями зрения ориентироваться в пространстве и решать повседневные задачи. Он подскажет, есть ли повреждения на посылке, определит название лекарства на столе или опишет содержимое холодильника и предложит варианты блюд. Для использования функции нужно запустить Live-режим, направить камеру смартфона на интересующий объект и задать вопрос голосом.
Live-режим основан на мультимодальной нейросети Yandex Alice VLM. Она распознаёт объекты, которые попадают в объектив камеры смартфона, и озвучивает их для пользователя. Общение с Алисой AI происходит голосом, а детали можно уточнять в процессе диалога. История разговоров сохраняется в чате. Чтобы активировать функцию, нужно выбрать её в меню приложения или сказать, например, «Алиса, запусти Live-режим».
Live-режим предоставляется бесплатно в мобильном приложении «Алиса AI» на устройствах с Android и iOS. В настоящее время озвучить команду могут только пользователи Android, но в ближайшее время эта возможность станет доступна и для владельцев iOS.
Источник: пресс-релиз Яндекса
Читайте также по теме:
Яндекс Директ рассказал о нововведениях в новом Мастере отчётов
Яндекс представил быструю нейросеть для бизнеса Alice AI LLM Flash