Ученые сделали перчатку, преобразующую язык жестов в текст

Исследователи из Университета Калифорнии (UCLA) разработали недорогую, высокотехнологичную перчатку, которая может с помощью смартфона переводить язык жестов в записанные или проговариваемые слова . Система работает в режиме реального времени и может интерпретировать 660 знаков американского языка жестов с точностью 98.63%. Такая система может быть использована для обучения людей языку жестов и помощи глухим людям в общении с пользователями, не владеющими языком жестов.

Перчатка имеет растяжимые датчики, прикрепляемые к каждому из пяти пальцев. Сигналы поступают на печатную плату размером с монету, расположенную на задней части перчатки, которая затем передает беспроводные сигналы на смартфон. Приложение может преобразовывать их в текст в режиме реального времени со скоростью до слова в секунду (60 слов в минуту). Команда исследователей также размещает клейкие датчики на лицах тестеров, чтобы фиксировать выражения лица, что тоже является частью американского языка жестов.

По словам исследователей, концепция не нова, но перчатки-прототипы UCLA более удобны и гораздо менее громоздки, чем другие конструкции. Еще лучше то, что вся конструкция стоит всего около 50 долларов и может стать еще дешевле при производстве.

Это все еще прототип, он должен стать быстрее и понимать больше символов, чтобы стать практичным. Однако после еще нескольких лет разработки он может позволить глухим людям легче общаться. «Мы надеемся, что это откроет легкий путь для людей, которые используют язык жестов, для прямого общения со всеми», — говорит разработчик продукта.