Представлені навушники sonicasl, що переводять мову жестів в мову

0
110

Дослідницька група під керівництвом вчених з університету буффало модифікувала гарнітуру з системою шумозаглушення, що дозволило електронного пристрою «бачити» і переводити мову жестів в парі зі смартфоном.

Система, що отримала назву sonicasl, показала ефективність 93,8% в тестах, проведених в приміщенні і на вулиці і включали 42 слова. Приклади використовуваної лексики:» любов»,» космос «і»камера». У тих же умовах, з використанням 30 простих пропозицій — наприклад, «приємно познайомитися» — sonicasl показав ефективність 90,6%.

Необхідно виконати ще багато роботи, перш ніж технологія зможе вийти на ринок в якості комерційного продукту, підкреслили дослідники. Наприклад, необхідно значно розширити словниковий запас sonicasl. Крім того, система повинна вміти читати міміку, що є важливим компонентом мови жестів.

Дослідники мають намір продовжувати роботу над створенням системи. Їх основний мотив полягає в тому, що в світі налічується більше 72 мільйонів людей з порушеннями слуху. Всі вони відчувають труднощі в спілкуванні з іншими людьми. Завдання дуже складне, тому що глухі люди в усьому світі мають справу з більш ніж 300 різними мовами жестів.

За словами дослідників, у винаході використовується доплерівська технологія, що дозволяє «відчувати» крихітні коливання або відлуння в акустичних хвилях, створюваних рухом руки. Результати дослідження будуть представлені на конференції acm conference on ubiquitous computing (ubicomp), яка пройде з 21 по 26 вересня.