|
“翻译臂环”让人“听”见手语近报 新闻 时间:2017年07月28日 来源:近报
北京航空航天大学研究生王娜娜和清华大学研究生黄爽研发出一种专门为听障人士设计的“翻译臂环”,可以直接将手语转化成语音。
这款臂环通过采集、识别手臂运动时产生的肌电信号来识别手势。这款臂环有八个传感器,其中有六个是肌电传感器,还有一个陀螺仪、一个重力感应器。肌电感应就相当于肌肉运动的时候有一个振幅,通过这个采集的频率,我们就可以分析出是哪块肌肉或者哪个位置的振幅,找到相对应的手势,再通过陀螺仪和重力感应器来判定位置,最终确定手势。当系统再次遇见同一个手势时,就能完成识别并将信息转化成语音。 团队在建立了手势动作的数据库之后,搭建了一个7层BP神经网络对数据速度进行训练。BP神经网络是一种按误差逆传播算法训练的多层前馈网络,是目前应用最广泛的神经网络模型之一。经过深度学习,臂环的识别准确度已经达到95%,未来它还可能会实现和听障人士对话、写手语字幕、完成手语教学等功能。 据人民网科普 |
||||||||||
放大
缩小
默认