Блоги

Компания Microsoft разработала программу для мобильных устройств Seeing AI, которая помогает незрячим людям общаться с окружающим миром. Его работа основана на технологии нейросетей: человек наводит камеру на предмет или человека, Seeing AI определяет, что или кто находится перед ним и рассказывает об объекте пользователю с помощью голосового синтезатора.

Приложение может распознавать людей, небольшой текст, номинал банкнот и товары по штрихкоду. Если навести камеру на человека, то Seeing AI скажет, какие у него эмоции, есть ли на нём головной убор или очки. Можно сохранить в памяти телефона фотографии друзей и знакомых, и тогда приложение будет называть их имена.

Для того, чтобы незрячий человек выбрал нужный продукт в магазине, Seeing AI сканирует штрихкод на упаковке. Название товара также зачитывается голосом. Приложение подскажет, куда нужно направить камеру, чтобы объект полностью попал в кадр.

В Seeing AI можно загрузить фото или скриншот из других программ. Тогда нейросети также распознают изображение и расскажут пользователю о том, что на нём происходит.

Для работы Seeing AI не требуется постоянное подключение интернета, поэтому пользоваться им можно везде, независимо от связи. Подключение к сети потребуется только для тестовых функций распознавания текста, написанного от руки, и общего описания того, что происходит вокруг.

На сегодняшний день приложение доступно жителям США только на iPhone.