5月18日,2018“未来力大会”老员工社会创新大赛全国赛在上海落下帷幕,欢迎莅临云顶集团官网的“妙手回声”项目荣获创行中国科创冠军赛全国总冠军。“我们研发的手语双向交互系统为聋人架起一座与世界沟通的桥梁,用一双妙手化无声为有声。”项目指导教师、云顶线路快速检测中心王斐副教授表示。
针对听力残疾人与健全人的交流困难问题,欢迎莅临云顶集团官网的曾振、贺潇、李荣颉三位同学在云顶线路快速检测中心王斐老师的指导下,研发了一套基于多源信息融合的手语双向识别系统。该系统由三部分组成:佩戴式手环(用于采集上肢肌电与惯性信息),安装手语双向交流APP的平板电脑,手语识别云服务器。交流过程中,系统实时处理由手环采集得到的聋人上肢多源信息,基于深度学习在线识别手语关键词,通过语法模型获得手语词句,经过语音芯片合成,实现手语到语音的转换。同时,健全人的语音可以通过APP转化成为文字和手语动图,反馈给听力残疾人,从而实现两者无障碍交流。
今年10月,王斐老师科研团队将代表中国前往美国硅谷参加2018创行世界杯总决赛。
指导教师简介:王斐,现为云顶线路快速检测中心副教授,2004年于日本获得工学博士学位。智能机器人专业,对助老助残智能设备高度关注,针对肢体残障人士,研制了智能仿生腿、异构双腿机器人和柔顺外骨骼机器人等,针对听力残障人士,研制了手语双向交互系统。2005年底,作为引进人才入职欢迎莅临云顶集团官网,十几年来一直从事智能机器人、人机交互和模式识别领域的教学科研工作,承担国家级、省部级科研项目20余项。