×
嵌入式 > 技术百科 > 详情

人脑信号生成文本实验,准确率可达97%

发布时间:2021-04-15 发布时间:
|

近日,一个由加州大学旧金山分校的研究团队打造的新型人工智能系统可根据人脑信号来生成文本,准确率最高可达 97%。目前该研究的结果已经发表在《自然神经科学》杂志上。

近几年,亚马逊和谷歌等科技公司打造的虚拟助手已经比较成熟,语音识别能力比起几年前进步惊人,人们在慢慢开始领会它们的威力。

然而,最近一项更令人惊叹、更匪夷所思的里程碑式技术创新可能即将实现。它的出现让语音识别技术完全相形见绌,这是一个十分强大的人工智能(AI)系统,可以根据人们的大脑活动直接生成完整的文本,整个过程完全不需要听到任何一个单词。这不完全是科幻小说中的概念。近几十年来,从动物模型到人类参与者,脑机接口技术的发展可谓突飞猛进。事实上,这类技术已经在尝试将这种概念从幻想变成现实。

加拿大研究团队就曾对此评论过,以目前来看,通过该技术将人脑信号转换成的文本结果还不很准确。为此,他们团队还使用了一种全新的方法来解码脑皮质电图:通过植入大脑的电极,来获取皮质活动中所产生的电脉冲记录。

具体而言,该实验团队在四名癫痫患者身上使用了这种植入物,以便监测他们的身体状况引起的癫痫发作情况。研究团队还进行了一项附带实验:让参与者大声、反复地朗读一些预先准备的句子,同时通过电极来记录他们在此期间的大脑活动。然后,这些数据被输入到一个神经网络,该网络根据实验的音频记录,分析出与特定语音特征(如元音、辅音或口型)相对应的大脑活动模式。最后,另一个神经网络对这些大脑表现进行解码——参与者反复朗读 30 到 50 个句子时产生的大脑活动数据——并据此来尝试预测人们所说的话,预测根据他们朗读单词时所产生的皮层信号来进行。

在实验条件顺利的情况下,该系统在将其中一名参与者的大脑信号转化成文本时,词错率(WER)只有 3%——至少在这些严格限定的实验条件下,这个词错率也许已经接近于迄今为止人工智能读取人的想法的最佳表现。

而在最不理想的情况中,神经网络的错误完全莫名其妙,不管是在语音上还是在语义上,都与实际的句子完全搭不着边:“她穿着温暖的羊毛工装裤”被预测为“绿洲是海市蜃楼”。

对此,该实验团队称,尽管这些显而易见的错误有些诡异,但总的来说,该系统也许还是刷新了基于 AI 的大脑活动解码的最佳表现,毕竟它表现最好时的词错率只有 5%,能够与专业的人工语音转录相提并论。

不过,要应付日常发言的专业转录员必须得有数以万计的词汇量。相比之下,这个系统只能从有限的短句中学习到大约 250 个单词的皮层特征,所以拿二者相比较并不公平。

虽然还有许多障碍需要克服,但该研究团队认为,该系统有朝一日可能会让那些失去说话能力的人能够重新“开口”说话。如果这样的事情成为可能,会有望产生巨大的影响——为一些人提供一种与周围世界交流的方式——而且所带来的影响可能会远远超出人们目前的想象。



『本文转载自网络,版权归原作者所有,如有侵权请联系删除』

热门文章 更多
SN74LVC04AD的技术参数