前沿科技分享:把脑信号译成语音 AI算法让有望让失语人士正常发声

作者: 佚名 2019-05-10 15:50:00

在近期发表在“自然”杂志上的一项研究中,加利福尼亚大学旧金山分校的神经科学家团队介绍了一种神经解码器,可以根据大脑活动合成自然发声的语音。

这项研究由演讲科学家Gopala Anumanchipalli和Chang实验室的生物工程研究生Josh Chartier领导。它正在加利福尼亚大学神经外科教授Edward Chang的实验室中开发。

前沿科技分享:把脑信号译成语音 AI算法让有望让失语人士正常发声

为什么要引入这种神经解码器?

由于中风,创伤性脑损伤或神经退行性疾病(如帕金森病,多发性硬化症和肌萎缩侧索硬化症),让许多人丧失语言能力

目前,跟踪非常小的眼睛或面部肌肉运动的辅助设备使得严重语言障碍的人能够通过逐字逐句地表达他们的想法。然而,用这样的设备生成文本或合成语音通常是耗时,费力且容易出错的。这些设备的另一个限制是它们只允许每分钟产生最多10个字。

这项研究表明,有可能生成一个人的声音的合成版本,可以通过他们的大脑活动来控制。研究人员相信,将来,这种装置可用于使严重言语障碍的人能够进行流畅的沟通。它甚至可以再现人类声音的一些“音乐性”,表达说话者的情感和个性。

“这项研究表明,我们可以根据个人的大脑活动生成完整的口语句子,”Chang说。 “这是一个令人振奋的原理证据,即已经触手可及的技术,我们应该能够构建一种在语言丢失患者中具有临床可行性的设备。”

这个系统如何运作?

这项研究是基于Josh Chartier和Gopala K. Anumanchipalli的另一项研究,该研究展示了我们大脑中的语音中心如何编排嘴唇,下巴,舌头和其他声道组件的运动以产生流畅的语音。

在这项新的研究中,Anumanchipalli和Chartier要求5名患者大声朗读几个句子。这些患者将电极植入他们的大脑中以绘制他们病情发作的来源以准备神经外科手术。同时,研究人员记录了已知涉及语言生成的大脑区域的活动。

研究人员使用志愿者声音的录音来理解产生这些声音所需的声道运动。通过这个详细的声音解剖图谱,科学家们为每个志愿者创造了一个真实的虚拟声道,可以通过他们的大脑活动来控制。

该系统由两个神经网络组成:

  • 解码器,用于将语音期间产生的大脑活动模式转换为虚拟声道的运动。
  • 一种合成器,用于将这些声道运动转换为志愿者声音的合成近似值。

研究人员观察到,与直接从志愿者的大脑活动中解码的合成语音相比,该系统产生的合成语音要好得多。

该系统仍处于早期阶段。 Chartier解释了它的局限性,他说:“我们仍然有办法完全模仿口语。 我们非常擅长合成较慢的语音,如“sh”和“z”,以及保持语音的节奏和语调以及说话者的性别和身份,但是一些更突然的声音,如'b'和'p'得到了 有点模糊。 尽管如此,与目前可用的相比,我们在这里制作的准确度水平将是实时通信的惊人改进。“

AI 算法
上一篇:提升12倍!中国香港浸会大学与MassGrid发布低带宽高效AI训练新算法 下一篇:又一家倒下:为何消费级机器人公司接连失败?
评论
取消
暂无评论,快去成为第一个评论的人吧

更多资讯推荐

人工智能可以像人类一样学习吗?

1956年的夏天,一场在美国达特茅斯(Dartmouth)大学召开的学术会议,“人工智能”(artificialintelligence)第一次被提出,多年以后该会议也被认定为全球人工智能研究的起点。2016年的春天,一场AlphaGo与世界优秀围棋高手李世石的人机世纪对战,人工智能新浪潮来临。

读芯术 ·  2020-01-09 17:03:29
机器学习入门必读:6种简单实用算法及学习曲线

大部分的机器学习算法主要用来解决两类问题——分类问题和回归问题。在本文当中,我们介绍一些简单但经典实用的传统机器学习算法,让大家对机器学习算法有一个基本的感性认识。

华章科技 ·  2020-01-09 10:45:17
AR眼镜,机器学习领域的杀手级应用? 精选

完美的AR眼镜需要把对话式AI、计算机视觉和其他复杂系统结合起来,这些系统必须能够像眼镜那样小巧,便于操作。低功耗AI不可或缺,这将确保合理的电池寿命,从而使得用户拥有较长的可以佩戴和使用眼镜的时间。

周蕾 ·  2019-12-23 14:28:43
如何将机器学习与敏感性分析相结合来制定业务策略?

数不清的企业通常使用机器学习(ML)来辅助决策。但是,在大多数情况下,机器学习系统做出的预测和业务决策仍然需要人类用户的直觉来做出判断。

CDA数据分析师 ·  2019-12-17 16:14:24
5个可以让你的模型在边缘设备上高效推理的算法 精选

深度学习模型这么大,这么慢,如何在边缘设备上部署使用?这里有5个算法,你可以试试。

AI公园 ·  2019-12-16 15:28:00
2020年,AI算法市场能火起来吗?

回头看看这一年的AI发展,或许八个字的总结十分合用“虚火下降,实火上升”。或许很多朋友觉得身边讨论AI的热度在下降。确实如此,今年从投资并购的发生数量、媒体对AI的讨论,以及社交媒体上AI的热度来看,都较比前两年大幅降温。

风辞远 ·  2019-11-28 15:31:37
酷极了!5分钟用Python理解人工智能优化算法

梯度下降是神经网络中流行的优化算法之一。一般来说,我们想要找到最小化误差函数的权重和偏差。梯度下降算法迭代地更新参数,以使整体网络的误差最小化。

python小白社区 ·  2019-11-27 09:47:49
为什么2019年人工智能算法岗求职竞争如此激烈?

在各公司全面数据化智能化的当下,算法岗本该更受青睐,为何突然成了就业重灾区?除了暴力劝退,本文将从几个不同角度来分析当前算法岗的求职就业情况。

皮皮鲁的AI星球 ·  2019-10-26 14:02:56
Copyright©2005-2020 51CTO.COM 版权所有 未经许可 请勿转载