Создана недорогая перчатка, преобразующая язык жестов в текст

Инженеры из Калифорнийского университета в Сан-Диего разработали умную перчатку, которая способна преобразовать алфавит американского языка жестов в текст, а также контролировать кисти виртуальных персонажей. Устройство было названо «The Language of Glove», а производство его стоит смешных денег – всего 100 долларов. Большая часть деталей за копейки приобретается в любом магазине электроники.

Помимо способности преобразовывать жесты в буквы, исследователи наделили свой гаджет поддержкой различных приложений для виртуальной и дополненной реальности. При помощи такого устройства можно дистанционно управлять манипуляторами в форме человеческих рук, а также производить множество других весьма полезных действий. Ранее несколько команд исследователей уже представляли миру подобные проекты. Уникальность конкретно этой перчатки заключается в её бюджетности и в том, что её сенсоры изготовлены из растягивающихся материалов. Эта разработка может подтолкнуть других разработчиков к созданию подобных устройств с новыми, ещё более впечатляющими возможностями.

Растягивающиеся сенсоры меняют своё сопротивление, когда их сгибают или растягивают. Расслабленная кисть сопоставляется системой со значением «0», а сжатый кулак – с «1». Когда дело доходит до декодирования алфавита американского языка жестов, исследователям пришлось создать бинарный код на основе количества отслеживаемых суставов кисти. Например, если речь идёт о букве «А» — большой палец выпрямлен, а все остальные сжаты – код будет «011111111», а буква «B» — когда большой палец согнут, а все остальные выпрямлены, код будет уже «100000000». В перчатку пришлось добавить также акселерометр и сенсор давления, чтобы отличать буквы вроде «I» и «J» — у них разные жесты, но одинаковый код.

В данный момент команда работает над следующей версией своей перчатки. По заверениям разработчиков, она позволит ощущать прикосновения к виртуальным объектам во время VR-игр или управления роботизированными манипуляторами со встроенными датчиками давления, отправляющими обратно сигналы о соприкосновении. В будущем перчатку также можно снабдить голосовым синтезатором, чтобы язык жестов озвучивался через встроенные динамики или смартфон. Вся информация об устройстве была опубликована в журнале PLOS ONE.