手语革命!穿戴装置让瘖哑人士也能轻松沟通


对瘖哑人士而言,手语是重要的沟通方式之一,然而一般人不懂手语沟通还是隔阂。不过美国得克萨斯州农工大学(TEXUA A&M UNIVERSITY)大学生物医学工程学系的助理教授鲁思贝.贾法理(Roozbeh Jafari)和他的团队正努力研发一款可以解读手语的穿戴感测装置。

鲁思贝.贾法理(Roozbeh Jafari)表示,目前针对美国标准手语(ASL-American Sign Language)自动翻译的系统,主要透过摄影机记录、追踪手部动作,将手语动作分解,透过影像追踪肢体轨迹,把手势转为文字,显现在计算机或手机屏幕上,

但当手语姿势不够精准或多人处在摄影镜头前都会失效,使用者必须随时携带相机也造成相当大的不便利性。



▲ 不同手语动作转译。

鲁思贝.贾法理(Roozbeh Jafari)开发的新型穿戴式感测装置,记录的不再是影像动作,而是用户在比手语时,手臂、手腕肌肉产出的肌电图(EMG- Electromyography),从手臂运动神经传导的电流讯号,解读转化成文字。鲁思贝.贾法理( Roozbeh Jafari)研究团队也将这套系统设计加装学习功能,即随着用户长期互动,系统会做行为学习并调整对不同手势动作的认知。



▲ 透过穿戴感测,动作可转译成文字。

未来,鲁思贝.贾法理(Roozbeh Jafari)期望除了能让手语沟通零距离之外,也能让人跟物之间的沟通强化,将传感装置的技术更多元推广到智慧生活中。新时代的沟通模式正在改变,对话或许不再局限于声音和文字,而是可能藉由肌肉、动作和讯号传导传达更多样的互动。

精彩评论 0

还可以输入100个字,评论长度3个中文字符以上
95919000:2017-08-24 09:17:16