军转网

 找回密码
 立即注册

QQ登录

只需一步,快速开始

微信登录

微信扫一扫,快速登录

查看: 748|回复: 18

[幸福驿站] 【暖新闻】清华北航90后女学霸研发手语翻译器:准确度达到95%

[复制链接]
发表于 2017-5-10 08:09:22 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有帐号?立即注册 微信登录

x
360截图20170510075948205.jpg
& K0 P. Y# `" |0 `' }
            演示者用手指向前方,又做出点赞的手势,“你好”的文字快速地反应在App“手音”的界面上。捕捉手部运动的肌电信号的是演示者手臂上的黑色臂环,看上去像跑步时用的护腕。# d* g/ t1 j: I0 K
4 b8 U  C' @1 i
       “手音”是一款针对失语者的小众产品,预计今年5月下旬上线。普通人可能难以想象这款产品的意义所在——手语是失语者彼此沟通的桥梁,但对于普通人来说是比所有外语都难的语言,“手音”将做润物细无声的沟通桥梁。
5 H4 ?/ K' }# J5 B 0 h% T" n" @* ^2 V5 A, m8 Y0 Y) Q
       “手音”的创始人王娜娜和联合创始人黄爽原是北京航空航天大学2012级的学生,她们是同一个宿舍的闺蜜,两个充满活力的女生在2015年开始想为失语者做些什么。  c: T( p" Q) U/ ~, a0 u( Z

% Y% h6 P/ {& [  v  W      在一次活动上,王娜娜认识了北京联合大学特殊教育学院毕业的失语者张权,并成了好朋友。因为王娜娜不会手语,这两位现实中的朋友相处更像网友,即便见面也往往会求助微信沟通。$ {7 r$ ^# O0 u9 e
) ~8 E# H0 B/ `& c; d0 w- p! E
       回到宿舍,王娜娜把张权的故事告诉了黄爽。她们此后认识了更多的失语者,也愈发感到沟通的困难。“有时我觉得我说话是在‘伤害’他们,一聊得开心就在想是不是忽略他们了,甚至有些自责。”王娜娜说。
: m3 @- C% B8 T
8 |" w8 Y, I. y       两个善良的姑娘一直在想,张权是失语者中的幸运儿,不仅可以上学还有工作,更多的失语者因为沟通一直是社会的边缘人,她们假想:老板开会听不见,点外卖没办法和店家沟通,别人怎么能接纳他们?《新闻联播》有手语同步翻译,可其他直播节目如果没有字幕,失语者就永远无法享受它。7 d/ X& Z; `! B

% J4 A3 t' l* Q8 ]; K# R" [" G- j       上网一查,数字更让两人咋舌:失语者(包含听障人士、脑中风患者、脑瘫患者和渐冻症患者)在中国的数量达到7000万人,占总人口的5%,这是一个非常庞大的数字。
3 }' @: a: z) I: E- Q , C# [( e; W- B  l# U
       两个人想起了参加“冯如杯”(冯如杯为北航校内学生学术科技作品竞赛)时的图像识别项目,当时这个项目获得了一等奖,或许可以用这种技术帮助失语者。王娜娜回忆:“我们感觉发现了一个没有人发现的需求,想成为第一个实现它的人,也让我们所学的知识有价值。”5 P+ ?9 q& ~1 o7 S; Z# D) C
: K& u% D* R) X  ]6 ~% r
       于是,她俩着手研究手语翻译的可行性,开始查论文、做实验、写代码,用冯如杯一等奖奖金5万元作为启动资金行动起来。图像识别被否决了,因为不能随时携带摄像头;手套被否决了,因为太引人注意,最终确定了通过臂环捕捉肌电信号的方法。因为智能手表逐渐普及,失语者带着臂环看上去并不突兀。
3 q) |1 Z3 u; y" Q9 B( R$ c9 X # f# f# B  _2 w
       产品一次次迭代,为的是要保护失语者的尊严。黄爽记得,她们做过“体验一天失语者”的活动。在便利店,因为结账时需要了解价格,失语者只能通过手机和店员沟通,时间稍长排在后面的人开始不耐烦地催促。“如果别人知道我是失语者可能会体谅,但不知道就会埋怨,越埋怨我越着急。”一些失语者不愿意别人称呼他们为“聋人”,自己会写成“龙人”。
! e7 B% _7 e0 n- k& f " P& ^. C; ?- A. K2 A
       确定研发方向后,关键是不断地输入数据、调试数据以保证手语翻译的准确性。为了检验模型的可靠性,最初只有两个人在录手语的数据,整天戴着臂环不停地做动作,黄爽开玩笑说:“练下去咱俩就要成为‘麒麟臂’啦!”
, ]& n& j# \5 }( X' Z: u  ^8 I . F# D5 M6 P0 y$ p8 |
       “当你真正去帮助他们,他们就知道是为他们好,就会非常配合。”王娜娜说,为了保证数据的多样化,并且真正让失语者喜欢,她们后来**了天津理工大学聋人工学院,合作进行数据采集和智能臂闭环开发,还与北京市朝阳区残联达成合作意向,为“手音”的产品服务化**咨询、指导。张权也成了团队的顾问。
' I8 {2 [+ C* o5 E+ I# K8 ] 8 }& S4 C% O( u2 `7 p2 a
       如今,“手音”涵盖了200个手语动作,为了保证精确度,每一个动作录制了1000人次。在有了自己的手势数据库之后,团队还搭建了一个7层BP神经网络(一种按误差逆传播算法训练的多层前馈网络,是目前应用最广泛的神经网络模型之一)对数据速度进行训练,目前识别准确度已经达到95%。
% ], b  V8 D2 w 7 \8 N, m& n: c$ Y% z) S7 I* j
       直到去年8月,团队里只有王娜娜和黄爽两个人,后来其他人逐渐加入。他们没有办公室,开会都是“打游击战”,咖啡厅、餐厅、教室都被征用过,做研发都是在自己的实验室里,但王娜娜说:“我们一天都没有想过放弃。”后来,团队内有人因出国而退出,王娜娜在北航保研继续深造,黄爽保研至清华大学。两个女学霸没有因升学而放弃团队,继续坚定地吸引人才研发产品。
  w# h' G& ]: ~
+ h9 l/ d& r- O) C! s* n0 t       由女生主导的技术型创业团队很少见,两个人也经历了磨合。最初,黄爽遇到意见不同时会等着双方都冷静下来回宿舍再沟通。王娜娜告诉她,团队沟通对事不对人,要彼此敞开心扉,现在两个人可以为一件事辩论个“你死我活”,也能在达成一致意见后手挽手去吃吃喝喝。团队里还有其他技术人员,大家一起熬夜写代码的时候,两个女生也会偶尔化身为“程序员鼓励师”,一起为团队加油打气。6 T& s5 _4 m) y3 B! b' c# d
, B/ Z6 W8 N$ |6 j
       这两个分别出生于1994年、1995年的女生笑着说:“或许因为我们现在还没有走向社会,没有买房的苦恼和社会的压力,只是觉得我们所拥有的技术能够对社会有价值,能够真正帮助一些人,我们又有时间,那就做吧!”7 U" X- D+ k2 H" I2 {1 `
( Y. {- k1 `( d8 m% [: S& X& J7 S
       她们关于未来有很多设想,“手音”可以实现面对面小聊和长时间对话的功能,未来还可以推出手语教学、手语字母和智能臂环闭环,解决手语教师缺乏等各种问题。此外,这种人工智能技术成熟后还可以应用在其他方面,例如可以教学钢琴的孩子更加准确地弹琴。9 E6 X! k) a0 A( m: c
& E# s9 H- r) |. A, i
       在前不久百度与联合国开发计划署共同主办的“极·致未来”责任创新挑战赛上,“手音”团队获得了一等奖和最佳人气奖,被誉为最有“包容性”的项目。
+ B: P+ x8 Y6 a6 C' k- j2 a

评分

参与人数 4经验 +100 津贴 +110 收起 理由
沉鱼 + 50 + 20 感谢您为论坛的繁荣做出贡献!
秋日诗语 + 50 + 20 谢谢发表精彩内容,论坛有您真好!
北极村长 + 30 谢谢发表精彩内容,论坛有您真好!
文士贝 + 40

查看全部评分

 成长值: 18490

发表于 2017-5-10 08:15:33 | 显示全部楼层
手语是万能语言吧?是否世界通用呀?

点评

谢谢朋友光临,周三快乐吉祥!  发表于 2017-5-10 11:11

评分

参与人数 1津贴 +6 收起 理由
地道云南人 + 6

查看全部评分

回复 支持 反对

使用道具 举报

发表于 2017-5-10 08:45:23 | 显示全部楼层
这两人也是军嫂呀?               

点评

谢谢朋友光临,周三快乐吉祥!  发表于 2017-5-10 11:11

评分

参与人数 1津贴 +6 收起 理由
地道云南人 + 6

查看全部评分

回复 支持 反对

使用道具 举报

 成长值: 18490

发表于 2017-5-10 09:10:18 | 显示全部楼层
这个厉害了 这样聋哑人与普通人的交流就顺畅了

点评

谢谢朋友光临,周三快乐吉祥!  发表于 2017-5-10 11:11

评分

参与人数 1津贴 +6 收起 理由
地道云南人 + 6

查看全部评分

回复 支持 反对

使用道具 举报

发表于 2017-5-10 09:23:13 | 显示全部楼层
  世上无难事,只怕有心人,有了这两们姑娘的发明,以后与聋哑人交流起来应该方便了许多。
2 y5 X0 t5 |9 v1 ^% s# l  任何一项发明,其实都掺进了感情要素在里面。“手音”的创始人王娜娜和联合创始人黄爽原是北京航空航天大学2012级的学生,她们在与聋哑朋友的接触中萌生了这样的想法,开始着手进行发明,经过不懈的努力,终于成功面世,经过众多试用者的使用,效果还是不错的,还获了几个奖项,相信她们的发明一定会让更多的聋哑人受益。
/ W6 X3 t$ [: e1 k8 o1 O2 }* L  这两名漂亮的姑娘还是学霸,前程似锦,她们不仅有爱心,更有责任感,相信她们的未来之路一定会更加灿烂。

点评

谢谢朋友光临,周三快乐吉祥!  发表于 2017-5-10 11:10

评分

参与人数 2经验 +50 津贴 +26 收起 理由
地道云南人 + 6
秋日诗语 + 50 + 20 真情互动奖!

查看全部评分

回复 支持 反对

使用道具 举报

 成长值: 10765

发表于 2017-5-10 09:35:58 | 显示全部楼层
善良的孩子,好有爱心,能够急他人所急,替他人着想,把自己的知识和才能,变为失语者的福音,期待你们有更多的发明创造,让更多的人受益。

点评

谢谢朋友光临,周三快乐吉祥!  发表于 2017-5-10 11:10

评分

参与人数 2经验 +30 津贴 +26 收起 理由
沉鱼 + 30 + 20 真情互动奖!
地道云南人 + 6

查看全部评分

回复 支持 反对

使用道具 举报

发表于 2017-5-10 09:51:20 | 显示全部楼层
很好很好,不用大家拼命学习英语了,

点评

谢谢朋友光临,周三快乐吉祥!  发表于 2017-5-10 11:10

评分

参与人数 1津贴 +6 收起 理由
地道云南人 + 6

查看全部评分

回复 支持 反对

使用道具 举报

发表于 2017-5-10 16:51:26 | 显示全部楼层
有爱心 每个人都应该脚踏实地 科学与研究从来都不是空中花园 立足实际 在生活中观察感悟 有创造 正如人看到鸟 渴望自由 所以才发明了飞机 人民的智慧亦无穷 不要压抑个性和思想。

点评

谢谢朋友光临,周三快乐吉祥!  发表于 2017-5-10 17:16

评分

参与人数 2经验 +30 津贴 +26 收起 理由
沉鱼 + 30 + 20 真情互动奖!
地道云南人 + 6

查看全部评分

回复 支持 反对

使用道具 举报

发表于 2017-5-10 19:54:08 | 显示全部楼层
感谢分享,周三快乐!!!!!!!!!!!!!!!!!!!!!!!!!!!

点评

谢谢朋友光临,周三快乐吉祥!  发表于 2017-5-10 22:24

评分

参与人数 1津贴 +6 收起 理由
地道云南人 + 6

查看全部评分

回复 支持 反对

使用道具 举报

发表于 2017-5-10 20:36:04 | 显示全部楼层
这俩位姑娘不简单,她们能用自己所学来为失语者与他人的勾通发明真是心怀大志。

点评

谢谢朋友光临,周三快乐吉祥!  发表于 2017-5-10 22:24

评分

参与人数 1津贴 +6 收起 理由
地道云南人 + 6

查看全部评分

回复 支持 反对

使用道具 举报

发表回复

您需要登录后才可以回帖 登录 | 立即注册 微信登录

本版积分规则