受谷歌眼镜启发,广州听障工程师立志搞出手语识别“先进科技”

南都科创
原创2017-05-12 06:55

在Google公司的历史中,谷歌眼镜绝对是一款具有话题性的产品——虽然它因设计、技术、营销等层面的种种问题,最终黯然退市,但是它的革命性和创新性毋庸置疑。今天,我们要介绍这个创客项目,就是直接因受谷歌眼镜的启发而生……

日前,广州市“天青杯”暨天英汇青年科技创新创业大赛迎来巅峰对决。一款针对听障人士设计的智能眼镜在比赛中脱颖而出,荣获二等奖。这款基于“增强现实技术”(AR)的智能眼镜,可通过语音文字实时翻译功能,满足听障者与人高效沟通的需求。据了解,该项目团队的发起人石城川便是一名听障人士,而项目研发的初衷也与其的个人经历有关。

timg.jpg

1自身遭遇催生创新念头            

数据显示,目前全国约有2000多万听障人士,他们有着不同程度的听力障碍,而“音书”团队的发起人石城川是其中一位。11岁时,石城川因为脑膜炎治疗用药不当而导致听力完全损伤,变成了重度听障者,即便是助听器也无法带来任何帮助。2011年,凭着顽强的毅力,他以超过一本分数线41分的成绩,从四川乐山考入暨南大学信息科学技术学院数学与应用数学专业。

“一般聋哑学校的课程会比普校慢3到5年。比如聋校高三的课程内容,差不多是普校初三的内容。一方面有其合理性,另一方面也说明听障人士融入正常生活有一定的难度”。石城川说,虽然自己可以正常说话,也会一点点手语,但因为听力障碍,在智能手机还没有普及的年代里,别人跟他交流多半还是要靠手写,“确实写下了不少稿纸。”

生活学习上的不便让石城川萌生了研发的念头,“希望有这样一个产品,可以帮助听障人士更好地融入正常生活。”

MAIN201503301524000541260799236.jpg

虽然患有听障,但是项目创立者石城川是名暨大毕业的学霸工程师。

2项目受“谷歌眼镜”启发            

在校时,石城川以优秀的成绩获得学校“自强不息”之星,还获得了2015年“中国大学生十大感动人物”提名。毕业那年,他找到了一份在跨国企业工程师的工作。然而,一年多之后,石城川选择了辞职,找来了华南理工大学软件学院读研究生的陈国强,希望可以一起做点事儿。

受到“谷歌眼镜”的启发,石城川觉得如果可以实现将音频转换成字幕,显示或投射在镜片上,这样听障人就能马上“看见”声音,便能加快交流沟通速度,提高工作效率和生活质量,帮助听障人士融入正常生活。出于对这一想法的支持和认同,陈国强决定加入团队,共同研发技术和产品。

据介绍,该项目取名“音书”,体现了将声音转化为文字的技术特点。2016年4月,“音书”项目正式投入研发。

W020130502390409213309.png

佩戴着谷歌眼镜的Google联合创始人谢尔盖·布林。

20133311111428548649_600_0.jpg

音书”项目负责人称,当初受到了谷歌眼镜的启发和鼓舞。

3调研数据坚定创业初心    

为了兼顾到使用者的特性,研发团队曾面向听障人士群体发放了调查问卷。调查显示,对于听障者来说,最大的梦想莫过于能同别人正常交流,但是受科技、医疗、经济条件限制,失聪后能够恢复听力的人寥寥无几。

“音书”团队称,目前,中国所有听障人中人工耳蜗的安装比例不足1%;当前听障人与健听人沟通时,64%是通过写字进行的。石城川介绍说,有超过52%的听障人士每天与健听人沟通超过1小时,其中有流程听障人士对目前的沟通效率不满意。

这些数据,更加坚定了石城川和团队“想要改善听障人士生活”的想法。

DSC01467.jpg

团队成员摆出“我们是音书大家庭”的手语。

4先做APP 再做眼镜    

据“音书”团队成员彭驷庆介绍,项目采取的“软件+硬件”的研发模式,在研发智能眼镜的同时,也开发了一款名为“音书APP”的手机软件。2016年7月,首个版本的“音书APP”进行测试。

彭驷庆说,“音书APP”是团队最先制作完成的一款软件,集成了语音识别功能,不仅可以让听障者接听语音电话,也可以帮助普通用户进行更高效的沟通。同时,软件还新加入了语音训练的功能,可以通过游戏的方式提升听障人的普通话水平。

经一轮测试后,今年1月20日,“音书APP”在各大应用商店上发布,供公众免费下载使用。“截止目前为止,有超过两万的用户群,其中99%为听障人士”,彭驷庆说。

“相比APP,智能眼镜的研发技术会更高一些”。彭驷庆说,目前眼镜采用的是AR技术,将音频转化成文字投射到眼镜镜片上,听障人士即时可见。眼镜续航时间为2-3天,不需要连接手机APP登录移动端,可独立使用。

1157269986.JPG

音书”眼镜将可实现将语音实时翻译文字的功能。

5关注手语即时翻译技术            

不过,实现语音到文字即时转化,并非“音书”团队的目标。他们心中的“智能眼镜”是可以帮助听觉或语言障碍人士实现正常沟通的。为此,“音书”正在研发将手语手势转化为语音的技术。

彭驷庆说,目前技术上的难点主要在于手语本身,“全国各地手语的差异性较大,不同地方的手语手势不同之处太多”。为了解决这一难题,“音书”团队正在和全国各地的相关机构和组织取得联系,已便能够掌握更多的手语数据。“预计到今年底或明年初能够实现手语实时翻译”,彭驷庆表示。

在前不久举行的广州市“天青杯”暨天英汇青年科技创新创业大赛决赛上,“音书”项目拿下了初创组第二名,获得了5万元奖金。第一代眼镜也已有成熟的样品制作完成,正在商谈融资事宜。“音书”方面表示,目前有不少人前来洽谈合作,但他们对此比较谨慎。“希望是对医疗类、健康类比较擅长的机构来投”,彭驷庆说:“广东土豪多,很多人想投钱。但是如果只是投几个月然后捞一笔就走,这不是我们想做的事”。

timg1.gif

未来无限,科技无限。

2036143018.JPG


出品:南都采编指挥中心、南都创客新闻工作室

主持:李建平

采写:南都记者 郑雨楠

制图:张许君 何欣

编辑:猪油力


编辑:石力

23
对这篇文章有想法?跟我聊聊吧
本作品著作权归南方都市报社所有,如需使用需经书面授权。授权联系方式:
banquan@nandu.cc,020-87006626。
好嘢听新闻报料去APP