Браслет і кільце розпізнають жести пальцями за допомогою звуку
Cheng Zhang et al. / CHI 18
Американські і китайські інженери створили систему з браслета і кільця, здатну розпізнати 22 жесту пальцями, в тому числі 10 символів американського жестової мови. Кільце на великому пальці випромінює звукові імпульси, які змінюють свої акустичні властивості, проходячи крізь пальці до браслету з мікрофонами, розповідають розробники в статті , Яка була представлена на конференції CHI 2018.
Група інженерів під керівництвом Грегорі Абоуда (Gregory Abowd) з Технологічного інституту Джорджії створили переносна пристрій, здатний розпізнавати жести пальцями. Воно складається з кільця, що закріплюється на великому пальці, і браслета. В кільце вбудований акустичний випромінювач і мікрофон, а в браслет ще три мікрофони. Принцип дії системи заснований на тому, що властивості звуку, яка сприймається мікрофонами, сильно залежать від шляху проходження звуку по тілу. Оскільки шлях проходження звуку змінюється, коли людина притуляє великий палець до інших пальцях, система може визначити за звуком, який саме жест показав користувач.
Елементи носиться контролера
Cheng Zhang et al. / CHI 18
Під час роботи випромінювач на пальці десять разів на секунду відтворює звукові імпульси з частотою від 20 герц до 6 кілогерц, а мікрофони реєструють сигнал після проходження через руку. Потім алгоритм на основі методу опорних векторів зіставляє сигнал із зразками 22 жестів - десять з яких позначають числа в американському жестовом мовою, а ще 12 представляють собою дотик великим пальцем всіх фаланг інших пальців. Розробники провели випробування системи на добровольцях і середня точність розпізнавання жестів склала 93,8 відсотків для жестів з фалангами і 95,6 для жестової мови.Автори статті відзначають, що у системи є помітний недолік - вона вимагає калібрування і її вміння розпізнавати жести залежить від конкретного користувача. У майбутньому вчені планують доопрацювати систему для розпізнавання усіх 26 букв американського жестової мови.
Інша група американських і китайських інженерів також представила на конференції CHI 2018 прототип незвичайного носиться пристрою, що розпізнає рух пальців за допомогою звуку. Вони створили розумні годинник без екрану, які проектують інтерфейс на руку і розпізнають положення пальця на руці за допомогою ультразвукових датчиків відстані, перетворюючи руку на подобу сенсорного екрану. Крім того існують кілька прототипів рукавичок, які розпізнають жести руки, вимірюючи вигин пальців.
Григорій Копіев