UCLA Samueli School of Engineering의 생명 공학자들은 스마트 폰 앱을 통해 실시간으로 미국 수화를 영어 음성으로 번역 할 수있는 장갑 같은 장치를 고안했습니다. 이 시스템에는 다섯 손가락의 길이를 통과하는 얇고 신축성있는 센서가 달린 장갑 한 쌍이 포함되어 있습니다.
장갑의 센서는 전기 전도성 원사로 만들어져 손 동작과 손가락 위치 (개별 문자, 숫자, 단어 및 구를 나타냄)를 감지합니다. 장치는 전기 신호로 손가락 움직임 온 손목에 착용하는 달러 동전 크기의 기판으로 전송된다. 보드는 이러한 신호를 스마트 폰에 무선으로 전송하여 초당 약 1 단어의 속도로 음성으로 변환합니다.
또한이 장치에는 테스터의 얼굴 (눈썹 사이와 입 한쪽)에 맞는 접착 센서가 포함되어 있어 미국 수화의 일부인 얼굴 표정 을 캡처 합니다. 이 장치는 가볍고 저렴하지만 오래 지속되는 신축성 폴리머로 만들어졌습니다. 전자 센서는 또한 매우 유연하고 저렴합니다.
웨어러블 장치는 미국 수화를 사용하는 4 명의 청각 장애인을 대상으로 테스트되었습니다. 착용자들은 각 손 제스처를 15 번 반복했고 맞춤형 기계 학습 알고리즘을 통해 이러한 제스처를 문자, 숫자, 단어로 변환했습니다. 이 시스템은 알파벳의 각 문자와 0부터 9까지의 숫자를 포함하여 660 개의 기호를 인식했습니다.이 장치는 부피가 크거나 불편하지 않으며 수화를 사용하는 사람들이 다른 사람의 도움 없이도 서명자가 아닌 사람과 직접 의사 소통을 쉽게 할 수 있습니다. 이 기술을 기반으로 한 상용 모델에는 추가 어휘와 더 빠른 번역 시간이 필요합니다.