主页 > 新闻 > 聚焦 > 正文

人工智能设备能读懂唇语 向脑机接口又迈进一步

点评

科技传媒网 科技媒体 2016-11-29 07:24

人工智能设备能读懂唇语 向脑机接口又迈进一步,人工智能 脑机 dnn 算法 神经网络 唇语

科技传媒网讯 科技媒体网站网易科技11月29日消息,据外媒报道,一种新型的语音合成器可以跳过语音记录,而直接将说话者嘴部动作转换为语句。

该设备能“观看”嘴唇的动作,并利用人工智能网络将它们转换成声音。

研究人员表示,该设备将能帮助声带麻痹患者发声,向脑机接口又迈进一步。

undefined

描述该装置的研究发表在《PLOS计算生物学》期刊上。

这项研究的作者来自法国国家科学研究中心。文章中提到,“这种语音合成器将人体主要语音发音器(舌,颚,口和嘴唇)的运动转换成智能语音。“

说话者的发言,以及嘴部各个部位的位置会被同时记录,然后通过人工智能网络算法进行分析。

此处使用的人工智能算法是基于人类大脑建模的深层神经网络(DNN)。算法设计针对偏复杂的模式识别。

该深层神经网络DNN通过测量舌头、下颚、软腭和嘴唇的协调动作(又称为”发音语音信号“)来识别嘴正在发音的某个词语。

undefined

作者解释道,DNN计算模型对这些测量的数据进行训练,将”发音语音信号“转换成”声学语音信号“。

作者提到,”这项研究中,我们让用于训练DNN模型的用户,以及陌生新用户都来测试语音合成器的实时控制性能,从而评估它在是否能很好地成为脑机接口的一部分。

“语音脑机接口将能通过解码皮层的语言相关活动,实时控制语音合成器,从而帮助有严重发声障碍的人恢复交流。

为帮助连声道都无法震动的患者”说话“,科学家将必须掌握如何解码大脑信号,并将其翻译成语音。

使用人工智能来解码语音和语言已有先例。

谷歌不久前推出了多语言之间机器翻译系统。该系统被成为“Zero-Shot翻译系统“,并具有自我学习能力。它能将未学习过的两种语言翻译成一种已经学习过的语言 ——换言之,通过人工智能训练学习了如何实现X语言对Y语言的翻译后,系统就能立即自动掌握从X到Z语言的翻译。

Google Brain的博文把这项翻译技术称为神经机器翻译系统(Google Neural Machine Translation ,简称GNMT)。(卢鑫)

原文链接:http://www.itmsc.cn/archives/view-137161-1.html
科技传媒网—致力于推动创新科技发展,专注科技新闻传播的新媒体平台。更多精彩内容请关注微信公众号:gdkjcm

(责任编辑:夏喧)

1.科技传媒网遵循行业规范,任何转载的稿件都会明确标注作者和来源;

2.科技传媒网的原创文章,请转载时务必注明文章作者和"来源:科技传媒网",不尊重原创的行为,科技传媒网都将保留追究责任权益;

3.作者投稿可能会经科技传媒网编辑修改或补充。

阅读延展
更多科技新闻 相关智库科技新闻阅读
科技传媒网科技要闻

重庆:新规实施后30台非法网约车被查

新华社重庆1月12日电(记者韩振)记者从重庆市交通执法直属支队了解到,自去年12月22日重庆颁布实施《网络预约出租汽车经营服务管理暂行办法》以来,已经有30台非

科技传媒网创客必读科技新闻

2016年阵亡企业名单,零售大洗牌正在上演

关店,或意味着悲情退出,或意味着断臂自救,或意味着重心转移,或意味着斡旋调整。不管是刻骨铭心的教训还是以退为进的战略,时代确实已经变了,全球范围的零售

科技传媒网每日精选阅读

人人车要靠金融实现盈利?二手车电商扎堆金融,究竟在拼什么

二手车电商行业进入2017年的第一个动作来自于人人车。1月11日,在人人车的2017年战略沟通会上,李健第一次提到了接下来会把金融作为重点业务之一,也公布了一些实质性的进展,一方面宣布与民生银行信用卡中心的战略合作,为二手车消费者提供消费贷,另一方面

科技传媒网科技专题
东莞市首届公共场所环境与健康论坛-科技传媒网
关于科技传媒网

科技传媒网(www.itmsc.cn),由广东省创新科技传媒服务中心主办,以社会需求为导向,搜集关于科技最新最全的时事动态。

微信
微博
RSS