И опять нейросети! Как гарнитура aiSee должна помочь слабовидящим

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

Исследователи из Национального Университета Сингапура (NUS) представили свежий прототип гарнитуры aiSee, призванный помочь незрячим и слабовидящим. Этот прототип, изначально разработанный в Университете Окленда в 2018 году, основан на искусственном интеллекте и использует камеру для идентификации объектов.


Доцент Суранга Нанаяккара (слева) со студентом NUS Марком Майресом (справа), который тестировал aiSee как пользователь с нарушениями зрения.
Источник: news.nus.edu.sg

Гарнитура предоставляет голосовое описание окружающего мира для пользователей с нарушениями зрения. Такие люди с ослабленным зрением часто испытывают трудности в распознавании предметов перед ними. Им, например, сложно различить банки с супом из-за одинакового внешнего вида их этикеток и упаковки. Да, поиск изображений на смартфоне и специальные приложения по озвучке могут помочь, однако этот метод требует наличия смартфона, подключения для передачи данных и свободной руки. И, опять-таки — нужно еще увидеть что-то на экране смартфона.

Судя по всему, название aiSee отсылает к игре слов, где AI — Artificial Intellegеnce (Искусственный интеллект) и звучит похоже на Eye — «глаз». Эта гарнитура работает по простому нажатию кнопки в левом ухе. 13-мегапиксельная камера фиксирует изображения объектов для идентификации системой на базе искусственного интеллекта, которая затем передает описания объектов владельцу через динамики с костной проводимостью, которые слышны даже в шумных помещениях на открытом воздухе. Эти динамики также не блокируют важные окружающие звуки. Питание гарнитуры осуществляется от аккумулятора емкостью 1200 мА.

Программное обеспечение гарнитуры способно извлекать из захваченного изображения такие элементы, как текст, логотипы и надписи, для обработки. Также разработчики заявляют что пользователь сможет задавать уточняющие вопросы, чтобы узнать больше об объекте. Кроме этого aiSee работает как автономная система, которая может функционировать независимо без необходимости в каких-либо дополнительных устройствах.

К настоящему моменту разработчики уже получили от B.P. De Silva Holdings Pte Ltd грант в размере 150 000 шведских долларов для поддержки проекта.

Источник: news.nus.edu.sg

На текущий момент aiSee все еще находится в стадии разработки для дальнейшего совершенствования устройства, а примеры использования можно увидеть на видео ниже


К сожалению, далеко не все разработки с использованием нейросетей несут пользу обществу. Не так давно мошенники подделали свои лица и голоса, чтобы успешно выманить выманили миллионы долларов прямо в ходе видеоконференции