东北大学学生研发“手语发声”手环 实现聋哑人与外界无障碍交流 - 成果 - 爱扫码·i3m.cn:3hhh.cn/6509 -扫一扫.cn·二维码.cn 333e.cn/6509 搜一搜.cn/6509


二维码
管理员
管理员
  • 社区居民
  • 最爱沙发
  • 原创写手
  • 忠实会员
阅读:418回复:0

无障碍·translate·翻訳·二维码.cn/i3h.cn/6509
·搜一搜.cn/东北大学学生研发“手语发声”手环 实现聋哑人与外界无障碍交流

楼主#
更多 发布于:2018-07-10 06:21
东北大学学生研发“手语发声”手环 实现聋哑人与外界无障碍交流【图】


央广网沈阳7月8日消息(记者郭威)东北大学三名学生研发出一种“手语转换发声”手环,通过连接服务器可以让手语发声,并把外界语音转化为文字,实现聋哑人和外界的无障碍沟通。5月18日,该项目获得了2018“未来力大会”大学生社会创新大赛全国总冠军。今年10月,该团队将代表中国前往美国硅谷参加2018创行世界杯总决赛。
“你好,我们帮助聋哑人交流,请大家支持我们,谢谢!”随着佩戴着手环的李荣颉所做的手语动作,平板电脑上清晰的发出了完整意思的语音。让聋哑人与完全不动懂手语的健全人进行交流,这一看起来“不可完成”的任务,就这样在东北大学李荣颉、曾振、贺萧三个大三学生的手中成为了现实。李荣颉说:“企业做1到1万的商业转化,而学生实验室可以不计回报地做从0到1的技术研发。经过各种各样的努力,这个算法模拟出各种问题之后,第一次做的手势发出声音时,真的特别开心。”



李荣颉正在演示供聋哑人交流使用的“神奇手环”

在机器人科学与工程学院教师王斐的指导下,这个由三个大学生组成的团队研发出了一套基于多源信息融合的手语双向识别系统。通过连接服务器把手语动作转化为语句,同时还可以把外界语音转化为文字。与传统基于视觉的手语识别方法相比,可避免光照、遮挡、干扰和手指细微动作无法捕捉等严重缺陷,在便携实用的同时,保证了识别的实时性和准确性。王斐介绍:“视频捕获抓肢体的动作没有问题,就像体感游戏,但是手指的动作是采不到的,还有外界自然光的干扰。而手环的优势是,手指在做动作的时候是由手臂的肌肉来牵引的,表面就有微弱的电信号,通过这个设备也可以清晰地采集到。”


王斐教授正在和学生们分析交流研发问题

在研发过程中,团队曾遇到了智能硬件核心技术的瓶颈问题,开发到一定程度就受制于国外的技术封锁,无法再进行深层次开发。为了能够做到从软件到硬件都是自有技术,团队经历了千万遍枯燥重复的实验和数不清的“推倒重来”。王斐说:“硬件的困难主要体现在微弱电信号、生理电信号的采集、放大还有处理。软件的难度则是如何能够把手语拆成单体的手语,在这个模型里组合,从语句变到句子,是最难的也是将来能够保住自己东西的壁垒。”
充分考虑到聋哑人是普遍收入偏低的弱势群体,研发团队通过对多种材料反复比对试验,最终选择了在保证产品性能的基础上,材料成本最低的方案,以实现项目成果的市场化转换。王斐表示,目前这个手环成本才250美元,价格很便宜。将来如果实现生产估计售价将在200、300块钱人民币,残疾人群体是完全负担得起的。
目前,包括一家国企在内的多家国内电子信息企业正在积极与研发团队就该项目进行接触。研发团队成员李荣颉说:“他最希望的事就是看到这个项目真正能够商品化,能够实用,真正解决聋哑人群体生活不便的问题,这比发几篇论文,获不获奖都来得重要的多。”
央广网·东北大学 JianSuo.cn 检索

https://news.html5.qq.com/share/865705481303111901?


第十七届全国大学生机器人大赛在邹城闭幕 东北大学连续三次冠军
央广网济宁6月21日消息(记者 林彦银)21日,由共青团中央、全国学联共同主办,共青团济宁市委、邹城市人民政府承办的第十七届全国大学生机器人大赛Robocon赛(北方赛区暨总决赛)在孟子故里邹城市胜利闭幕。
经过3天的角逐,决赛最终在东北大学代表队和河北工程大学代表队之间展开,东北大学代表队摘得本届比赛桂冠,河北工程大学代表队屈居亚军,东莞理工学院代表队和温州职业技术学院代表队获得季军。据悉,这是东北大学代表队连续第三次获得冠军,其将继续代表中国出征今年在越南举办的亚洲广播联合会(ABU)“亚太大学生机器人大赛”。
闭幕式上,邹城市委书记柳景武首先代表市委、市政府向大赛的成功举办表示热烈祝贺。柳景武指出,邹城作为传统资源型城市,在转型发展的过程中,紧紧围绕新旧动能转换这一主线,持续强化创新引领,着力壮大“四新”经济,不断培育发展新动能、打造经济增长新引擎。他表示,全国大学生机器人大赛,不仅是一次科技竞技与成果展示的盛会,也是一个加强交流与增进沟通的平台,更为邹城推动智能制造产业发展、加速新旧动能转换提供了难得机遇。邹城将充分发挥大赛的引领带动效应,加快济宁机器人产业园、全国大学生机器人大赛创业孵化园建设,积极打造国家级机器人检验检测中心等研发平台,推动机器人产业做大做强、加速崛起。
团中央学校部副部长、全国学联副秘书长宋来在讲话中指出,这场盛会不仅充分展示了当代青年学子朝气蓬勃、健康向上的精神风貌,还彰显了当代青年大学生勇立创新创业时代潮头的青春风采。宋来强调,要重视基础创新,掌握核心技术,聚焦机器人项目转化,推动产品应用,以国际化视野,紧跟时代前沿。宋来表示,青年人生逢其时,也重任在肩,要有披荆斩棘的勇气,筚路蓝缕的耐性,乘风破浪,久久为功,在实践中体验科技的快乐,为实现中华民族伟大复兴的中国梦贡献青春力量。

  2018.06.21 21:35:00  原始网页

  • 喜欢0 评分0
    游客
    

    返回顶部