В лаборатории исследований осязательного интерфейса университет Пердью (штат Индиана) создана технология, которая позволяет читать текстовые сообщения, интерпретируя ощущения на коже руки.

Результаты этой работы, проделанной в сотрудничестве с учёными из Facebook и Массачусетского технологического института (MIT), были представлены в материалах конференции EuroHaptics 2018, состоявшейся в середине прошлого месяца в Пизе (Италия).

Руководитель лаборатории, профессор Хун Тань (Hong Tan), отмечает, что данное исследование в первую очередь нацелено на помощь людям с проблемами слуха или зрения, однако в перспективе может оказаться полезным для всех пользователей.

«Представьте себе будущее, в котором ваш рукав сможет незаметно посылать вам сообщения — через вашу кожу — в моменты, когда неудобно просматривать текстовое сообщение, Я действительно рассчитываю, что это станет общей идеей для нового способа коммуникаций», — говорит Тань.

В экспериментах использовался матерчатый рукав, охватывающий предплечье между запястьем и локтём. В него были встроены 24 тактора (тактильных излучателя), которые по сигналу воздействовали на кожу вибрацией.

Исследователи закодировали в разные рисунки активации этих тракторов 39 фонем английского языка. При этом согласные звуки передавались статическим воздействием в разных участках руки, а гласным соответствовали ощущения, движущиеся вверх, вниз или вокруг руки.

В работе тестировался не только сам интерфейс, но и методика обучения работе с ним. Наиболее эффективным оказалось интенсивное обучение по 10 минут в день на протяжении 10 дней. За этот период подопытными было изучено 100 слов. Последующее тестирование показало, что не менее половины участников смогли продемонстрировать 80-процентную точность распознавания, а двое из двенадцати достигли точности 90%.

Профессор Тань подчеркнула, что среди бесчисленного множества способов преобразования речи в тактильные ощущения могут быть и более эффективные, их же задачей было продемонстрировать, что такая технология может работать в принципе.