当前位置 :主页 > 香港七星报码聊天室 >
90后女学霸研发手语翻译器 通过臂环捕捉肌电信号-西部
90后女学霸研发手语翻译器 通过臂环捕捉肌电信号-西部
* 来源 :http://www.mike60.net * 作者 : * 发表时间 : 2017-05-09 19:11

  演示者用手指向前方,又做出点赞的手势,“你好”的文字快速地反应在App“手音”的界面上。捕捉手部运动的肌电信号的是演示者手臂上的黑色臂环,看上去像跑步时用的护腕。

  “手音”是一款针对失语者的小众产品,预计今年5月下旬上线。一般人可能难以设想这款产品的意思所在??手语是失语者彼此沟通的桥梁,但对个别人来说是比所有外语都难的语言,“手音”将做润物细无声的沟通桥梁。

美女学霸研发手语翻译器 通过臂环捕获肌电信号

  “手音”的开创人王娜娜跟联合首创人黄爽原是北京航空航天大学2012级的学生,她们是同一个宿舍的闺蜜,两个充满活力的女生在2015年开始想为失语者做些什么。

  在一次活动上,王娜娜意识了北京联合大学特殊教诲学院毕业的失语者张权,并成了挚友人。因为王娜娜不会手语,这两位事实中的友人相处更像网友,即便会见也往往会求助微信沟通。

  回到宿舍,王娜娜把张权的故事告知了黄爽。她们此后意识了更多的失语者,也愈察觉得沟通的艰难。“有时我认为我谈话是在‘侵害’他们,一聊得开心就在想是不是忽视他们了,甚至有些自责。”王娜娜说。

  两个善良的姑娘始终在想,张权是失语者中的幸运儿,不仅能够上学还有工作,更多的失语者由于沟通始终是社会的边缘人,她们假想:老板开会听不见,点外卖没办法跟店家沟通,别人怎么能接受他们?《新闻联播》有手语同步翻译,可其余直播节目如果不字幕,失语者就永远无奈享受它。

  上网一查,数字更让两人咋舌:失语者(包含听障人士、脑中风患者、脑瘫患者和渐冻症患者)在中国的数量到达7000万人,占总人口的5%,这是一个无比巨大的数字。

  两个人想起了参加“冯如杯”(冯如杯为北航校内学生学术科技作品竞赛)时的图像识别项目,当时这个名目获得了一等奖,或者可能用这种技能帮助失语者。王娜娜回忆:“咱们感到发现了一个不人发明的须要,想成为第一个实现它的人,也让我们所学的常识有价值。”

  于是,她俩着手研究手语翻译的可行性,开端查论文、做试验、写代码,用冯如杯一等奖奖金5万元作为启动资金举措起来。图像识别被否决了,因为不能随时携带摄像头;手套被否决了,因为太惹人留心,最终判断了通过臂环捉拿肌电信号的方法。因为智能手表逐步遍布,失语者带着臂环看上去并不突兀。

  产品一次次迭代,为的是要保护失语者的尊严。黄爽记得,她们做过“闭会一天失语者”的活动。在便利店,因为结账时需要理解价格,失语者只能通过手机和店员沟通,时间稍长排在后面的人开始不耐烦地督促。“假如别人晓得我是失语者可能会体谅,但不知道就会埋怨,越抱怨我越着急。”一些失语者不愿意别人称说他们为“聋人”,自己会写成“龙人”。

  确定研发方向后,关键是一直地输入数据、调试数据以保障手语翻译的精确性。为了考试模型的坚固性,最初只有两个人在录手语的数据,终日戴着臂环不停地做动作,黄爽开玩笑说:“练下去咱俩就要成为‘麒麟臂’啦!”

  “当你真正去辅助他们,他们就知道是为他们好,就会十调配合。”王娜娜说,为了保证数据的多样化,并且真正让失语者喜好,她们后来联系了天津理工大学聋人工学院,合作进行数据采集和智能臂闭环开发,还与北京市朝阳区残联达成配合动向,为“手音”的产品服务化供应咨询、引导。张权也成了团队的顾问。

  当初,“手音”涵盖了200个手语动作,为了保障正确度,每一个动作录制了1000人次。在有了本人的手势数据库之后,团队还搭建了一个7层BP神经网络(一种按误差逆传播算法训练的多层前馈网络,是目前应用最广泛的神经网络模型之一)对数据速度进行练习,目前辨认准确度已经达到95%。

  直到去年8月,团队里只有王娜娜和黄爽两个人,后来其别人逐渐加入。他们没有办公室,开会都是“打游击战”,咖啡厅、餐厅、教室都被征用过,做研发都是在自己的实验室里,但王娜娜说:“我们一天都没有想过放弃。”后来,团队内有人因出国而退出,王娜娜在北航保研连续深造,黄爽保研至清华大学。两个女学霸没有因升学而废弃团队,继续摇动地吸引人才研发产品。

  由女生主导的技术型创业团队很少见,两个人也经历了磨合。最初,黄爽遇到看法不同时会等着双方都冷静下来回宿舍再沟通。王娜娜告诉她,团队沟通对事过错人,要彼此敞开心扉,现在两个人可以为一件事辩论个“鱼逝世网破”,也能在达成一致见解后手挽手去吃吃喝喝。团队里还有其他技术人员,大家一起熬夜写代码的时候,两个女生也会偶尔化身为“程序员鼓励师”,一起为团队加油打气。

  这两个辨别出生于1994年、1995年的女生笑着说:“兴许因为咱们当初还没有走向社会,没有买房的苦恼和社会的压力,只是觉得我们所领有的技术可以对社会有价值,可能真正援助一些人,我们又有时间,那就做吧!”

  她们对未来有很多设想,“手音”可以实现背靠背小聊和长时光对话的功能,将来还可以推出手语教养、手语字母和智能臂环闭环,解决手语老师缺乏等各种问题。此外,这种人工智能技巧成熟后还可以应用在其余方面,例如可以教养钢琴的孩子更加准确地弹琴。

  在前不久百度与结合国开发盘算署奇特主办的“极?致未来”任务翻新挑战赛上,“手音”团队失掉了一等奖和最佳人气奖,被誉为最有“包容性”的名目。

  中国青年报?中青在线记者 陈璐 来源:中国青年报 ( 2017年05月09日 12 版)

编辑:

下一篇:没有了