封面:DALL-E3
CyberDaily:
帮助瘫痪人士,意念打字。
每当我们进行思考的时候,我们的大脑都会产生电波动作。在这一突破性的研究中,科学家们使用了充满传感器的头盔和人工智能,他们宣布可以将人的思维转化为书面文字,这对于身体残疾人群的交流或者机器人学领域都具有重大的应用价值。
这个研究背景是,参与者在阅读文本段落的同时佩戴了一个可以通过头皮记录电脑活动的头盔。这些电脑活动数据被称作脑电波(EEG)记录,然后使用一个叫做DeWave的人工智能模型转化为文本。
澳大利亚悉尼科技大学的Chin-Teng Lin表示,这项技术是非侵入性的,相对安全。
虽然这个系统离完美还有很长的路要走,目前的准确率大约是40%,但Lin说,目前正在进行同行评审的更多数据显示准确率超过60%。
在新奥尔良的NeurIPS会议上,参与者在朗读这些句子时,尽管DeWave程序并不使用口语。然而,在最新的研究中,参与者在阅读句子时保持了沉默。
去年,德克萨斯大学奥斯汀分校的Jerry Tang团队报道了一个类似的将思想转化为文本的准确度,但是他们使用的是MRI扫描来解读大脑活动。在这次研究中,科研人员发现使用EEG更为实用,因为受试者不必在扫描器中保持静止。
DeWave模型是通过查看大量大脑信号与特定句子匹配的例子来训练的,例如,当你想说“你好”时,你的大脑会发送出特定的信号。DeWave通过查看这些信号对于不同单词或句子的许多例子学习了这些信号与“你好”的关系。
一旦DeWave理解了大脑信号,该团队将其连接到一个开源大型语言模型(LLM),类似于支持ChatGPT的人工智能。
这个LLM就像一个会写句子的聪明人。我们告诉这个作者注意来自DeWave的信号,并将他们作为指导来创建句子。
在训练后,该团队发现DeWave和语言模型可以更好的基于EEG数据编写句子。
此项技术的研究者预测,经过进一步的精细调整,该系统可能会为失去语言能力的人士,如中风患者,和机器人学领域的通信带来革命性的改变。
悉尼大学的Craig Jin对Lin团队的工作表示赞赏,“这是一个重大的进步。”
“人们一直想把EEG转化成文字,而这个团队的模型显示出了令人瞩目的准确程度。几年前,EEG到文字的转化还十分混乱。”
领取专属 10元无门槛券
私享最新 技术干货