辽宁   >   本网专稿

东北大学学生研发手语识别系统 实现与听力障碍者无障碍交流

来源:中国日报网
2018-05-21 16:39:12
分享

东北大学学生研发手语识别系统 实现与听力障碍者无障碍交流
手语双向交互系统使用示意图

5月17日至18日,2018“未来力大会”大学生社会创新大赛全国赛于在上海举行,东北大学的“妙手回声”项目荣获创行中国科创冠军赛全国总冠军。

“我们研发的手语双向交互系统为听力障碍者架起一座与世界沟通的桥梁,用一双妙手化无声为有声。”项目指导教师、东北大学机器人科学与工程学院王斐副教授说。

针对听力障碍者在日常生活中与健全人交流困难的问题,东北大学曾振、贺潇、李荣颉等同学在王斐老师的指导下研发出了一套基于多源信息融合的手语双向交互系统。

该系统由可同步采集上肢肌电与惯性信息的佩戴式手环、安装有手语双向交流APP的平板电脑和手语识别云服务器构成。手环通过连接服务器就可以让手语发声,并且把外界语音转化为文字,实现听力障碍者和外界的无障碍沟通,真正帮助到他们的生活。

与传统基于机器视觉的手势识别方法相比,使用肌电手环可避免光照、遮挡、干扰和手指细微动作无法捕捉等严重缺陷,在便携实用的同时,更增加了手语识别的实时性和准确性。

2018年10月,该团队将代表中国前往美国硅谷参加2018创行世界杯总决赛。

(中国日报辽宁记者站)

分享
标签:

推荐