Microsoft разработала приложение Seeing AI, которое построено на базе нейросетей и создано специально для слепых и слабовидящих людей, сообщается на сайте компании.
Приложение в данный момент доступно только пользователям продукции Apple в США.
Пользователю, используя голос, необходимо вначале указать, что требуется распознать: надпись, человека, текст либо продукт в магазине. После этого необходимо навести камеру на нужный объект и получить о нем информацию.
Если навести камеру на человека, приложение назовет его примерный возраст и черты внешности (например, носит ли он очки), а также опишет выражение его лица. Пользователь может сфотографировать своего друга, тогда его изображение сохранится в базе данных, и в следующий раз Seeing AI просто назовет его по имени.
Microsoft встроила в приложение распознавание штрихкодов. Благодаря этому можно узнать название продукта в магазине и получить его краткое описание. The Verge отмечает, что распознавание купюр особенно актуально в США, где все доллары одного размера и цвета вне зависимости от номинала.
Seeing AI подсказывает пользователю, куда двигать камеру, чтобы нужный объект или надпись целиком попали в кадр.