Back to Feed
总结
此前脑机接口在英语语音与文字合成方面进展较快,但汉语解码研究相对不足。中国科学院研究团队面向汉语,研制植入式高通量柔性脑机接口系统,并提出实时神经网络解码算法,首次实现脑信号到汉语的实时解码与语句合成。团队利用约400个音节与4个声调作为稳定中间单元,实现从神经信号到文字的“翻译”,并可外推覆盖常用汉字。实验显示,受试者训练9天后,394个音节纯神经解码平均准确率达71.2%,单音节解码延时65ms,实时语句解码速率49.6字/分钟。
正文
应用脑机接口技术已突破英语语音和文字合成,但针对汉语解码的脑机接口技术研究相对较少。中国科学院研究人员针对汉语解码,开发出植入式高通量柔性脑机接口系统和汉语言实时神经网络解码算法,首次实现脑机接口实时汉语解码和语句合成。相比于英语,汉语具有其独特性。具体而言,英语是以多音节为主的非声调语言,汉语则是以单音节为主的声调语言。同时,英语词汇量较大,常用英语单词约为 20000 个,而汉语通过约 400 个汉语音节加 4 个声调,可构建出覆盖日常需求的 3500 多个常用汉字。研究团队利用汉语本身优势,从约 400 个汉语音节和 4 个声调入手,将其作为稳定的中间解码单元,实现从脑电到文字的"翻译",且通过解码这些汉语音节和声调,可外推至全部汉字。研究显示,受试者经过9天的语言解码任务后,394个汉语音节(解码未覆盖音节为生僻音节且受试者不认识)纯神经解码平均准确率达到71.2%,单音节解码延时65ms,实时汉语语句解码速率达到 49.6 字/分钟。
发布时间: