《自然》 脑机接口新突破 人脑信号转文本准确率达97%

交互
  • 网易智能
  • 2020-04-24 17:54

据国外媒体报道,一个由加州大学旧金山分校的研究团队打造的新型人工智能系统可根据人脑信号来生成文本,准确率最高可达97%。

亚马逊和谷歌等科技公司打造的虚拟助手相当先进,语音识别能力比起几年前进步惊人,近年来人们才刚开始领会它们的威力。

然而,事实上,一项更令人惊叹、更匪夷所思的里程碑式技术创新可能即将实现。它的出现让语音识别技术完全相形见绌,这是一个十分强大的人工智能(AI)系统,可以根据人们的大脑活动直接生成完整的文本,整个过程完全不需要听到任何一个单词。

640(1).jpg

这不完全是科幻小说中的概念。近几十年来,从动物模型到人类参与者,脑机接口技术的发展可谓突飞猛进。事实上,这类技术已经在尝试将这种概念从幻想变成现实。

加州大学旧金山分校的研究人员在一项新研究中解释说,目前来看,通过该技术将人脑信号转换成的文本结果还不很准确。

为了探究是否能够改善这一状况,由加州大学旧金山分校Edward Chang实验室神经外科教授Edward Chang领导的一个团队使用了一种全新的方法来解码脑皮质电图:通过植入大脑的电极,来获取皮质活动中所产生的电脉冲记录。

在这项研究中,四名癫痫患者使用了这种植入物,以便监测他们的身体状况引起的癫痫发作情况。研究团队还进行了一项附带实验:让参与者大声、反复地朗读一些预先准备的句子,同时通过电极来记录他们在此期间的大脑活动。

然后,这些数据被输入到一个神经网络,该网络根据实验的音频记录,分析出与特定语音特征(如元音、辅音或口型)相对应的大脑活动模式。

之后,另一个神经网络对这些大脑表现进行解码——参与者反复朗读30到50个句子时产生的大脑活动数据——并据此来尝试预测人们所说的话,预测根据他们朗读单词时所产生的皮层信号来进行。

在最好的情况下,该系统在将其中一名参与者的大脑信号转化成文本时,词错率(WER)只有3%——至少在这些严格限定的实验条件下,这个词错率也许已经接近于迄今为止人工智能读取人的想法的最佳表现。

在研究论文中,研究团队详细列举了许多参与者所朗读的参照句子的例子,以及神经网络所生成的“预测”。那些预测有时是错误的,但也不总是出错。然而,从那些非常明显的错误来看,它们似乎与人耳听语音时会犯的错误大不一样(这可能是人工智能引入的数据集有限所致)。

神经网络出错的例子包括:“这家博物馆每天晚上都聘请音乐家过来”,被预测为“这家博物馆每个昂贵的早晨都聘请音乐家过来”;“蛋糕的一部分被狗吃掉了”,被预测为“蛋糕的一部分是饼干”;“蒂娜·特纳是一位流行歌手”,被预测被“迪德·特纳是一位流行歌手”。

在最糟糕的例子中,神经网络的错误完全莫名其妙,不管是在语音上还是在语义上,都与实际的句子完全搭不着边:“她穿着温暖的羊毛工装裤”被预测为“绿洲是海市蜃楼”。

然而,研究团队称,尽管这些显而易见的错误有些诡异,但总的来说,该系统也许还是刷新了基于AI的大脑活动解码的最佳表现,毕竟它表现最好时的词错率只有5%,能够与专业的人工语音转录相提并论。

当然,要应付日常发言的专业转录员必须得有数以万计的词汇量。相比之下,这个系统只能从有限的短句中学习到大约250个单词的皮层特征,所以拿二者相比较并不公平。

虽然还有许多障碍需要克服,但研究团伙认为,该系统有朝一日可能会让那些失去说话能力的人能够重新“开口”说话。如果这样的事情成为可能,会有望产生巨大的影响——为一些人提供一种与周围世界交流的方式——而且所带来的影响可能会远远超出人们目前的想象。

研究论文的作者解释说,“在长期植入的参与者中,可用的训练数据量将比本研究中使用的半小时左右的语音量大几个数量级,这意味着输入语言的词汇量和表达灵活性会大大提高。”

该研究的结果发表在《自然神经科学》杂志上。(乐邦)

来源:网易智能

作者:乐邦

编辑:leilei

图片来源:

本文链接: https://www.aisut.com/article/20200424/1162.html

声明:除非注明,本站文章均为AIUST.Com原创或编译,转载时请注明文章作者和“来源:AIUST.Com”,AIUST.Com尊重行业规范,每篇文章都标有明确的作者和来源。文章为作者观点,不代表AIUST.Com立场。部份图片来自网络,如有侵权,请联系我们删除!

免责:阁下应知本网站的任何内容仅供参考,不能做为投资决策依据,投资有风险,入市须警慎!

相关文章

资讯

原创

荐读

  • 5G+AR加持 晨星机器人掀起“智能化+人机交互”制造新趋势 5G+AR加持 晨星机器人掀起“智能化+人机交互”制造新趋势

    2021世界制造业大会于11月22日在合肥落下帷幕。为期四天的大会中,作为向世界展示智能制造全面能力的窗口,联想展示了一系列让人惊喜的创新产品。现场展示的ThinkPad X1 Fold整体重量仅有1公斤,折叠起来之后的厚度大约为24毫米。当保持半开状态时,可以像拿本书一样握住,并且能同时运行两个应用程序。使用固定在中间的键盘之后,瞬间变...

  • 智能手机竞争中失败,日本在联网汽车领域举步维艰 智能手机竞争中失败,日本在联网汽车领域举步维艰

    据外媒报道,在制造带有数字联网服务的汽车的竞争中,丰田汽车和日产汽车面临着被本土市场拖累的风险。与美国和欧洲的汽车消费者不同的是,日本消费者不愿意为这些联网功能和服务买单。结果就是:日本只有10%的汽车...

  • 2020年河南省将推广应用3万台工业机器人 2020年河南省将推广应用3万台工业机器人

    到2020年,推广应用3万台工业机器人,建设1000条智能生产线、300个智能车间、150个智能工厂……4月16日,在2018两岸智能装备制造郑州论坛上,河南省工信委发布了《2017年河南省智能制造白皮书》,河南智能制造的2020...

热门标签