重要突破!西湖大学团队和浙二医院共同实现脑机接口中文解码
来源:搜狐
时间:2023-11-29 10:17:42 364浏览 收藏
科技周边不知道大家是否熟悉?今天我将给大家介绍《重要突破!西湖大学团队和浙二医院共同实现脑机接口中文解码》,这篇文章主要会讲到等等知识点,如果你在看完本篇文章后,有更好的建议或者发现哪里有问题,希望大家都能积极评论指出,谢谢!希望我们能一起加油进步!
先进神经芯片中心默罕默德·萨万教授团队,自然语言处理实验室张岳教授团队和朱君明教授团队联合发布了他们最新的研究结果:“A high-performance brain-sentence communication designed for logosyllabic language”.该研究实现脑机接口全谱汉语解码,一定程度弥补了国际上汉语解码脑机接口技术的空白。
脑机接口(Brain-computer interface,简称BCI)被公认为是未来生命科学和信息技术交叉融合的主战场,是具有重要社会价值和战略意义的研究方向。
脑机接口技术是指是在人或动物脑与外部设备间创建信息交换的连接通路,其实质是一种新型的信息传输渠道,让信息能够绕过原有的肌肉及外围神经通路实现与外部世界的连通,从而一定程度替代人的运动、语言等功能。
脑机接口全谱汉语解码器的设计与性能
今年八月,两篇背靠背《自然》文章展示了脑机接口在语言恢复方面的强大能力。然而,现有的语言脑机接口技术多是为英文等字母语言体系构建而成,针对汉字等非字母体系的语言脑机接口系统研究仍是空白。
在该项研究中,研究团队通过立体定向脑电技术(SEEG)采集所有普通话汉字发音过程对应的大脑内神经活动信号,结合深度学习算法和语言模型,实现了对全谱汉字发音的解码,建立起覆盖所有汉语普通话字符发音的汉语脑机接口系统,实现了大脑活动到完整普通话句子的端到端输出。
汉语作为一种象形和音节结合的语言,具有超过50000个字符,与由26个字母组合而成的英语具有显著不同,因此这对于现有的语言脑机接口系统来说是一个巨大的挑战。为了解决这一问题,在过去三年时间里,研究团队深入分析汉语本身的发音规则和特点。从汉语发音音节的声母、声调和韵母三个要素出发,结合拼音输入系统的特点,设计了一种全新的适用于汉语的语言脑机接口系统。研究团队通过设计覆盖所有407个汉语拼音音节以及汉语发音特点的语音库并同步收集脑电信号,构建了超过100小时的汉语语音-SEEG数据库。通过人工智能模型训练,该系统构建了针对汉字发音音节三要素(包括声母、声调和韵母)的预测模型,并最终通过一个语言模型对所有预测得到的元素进行整合,结合语义信息生成最可能的完整汉语句子。
研究团队对这一脑机接口系统在模拟日常汉语环境中的解码能力进行了评估。在超过100次随机选择的2个字符-15个字符的复杂交流场景解码测试后,所有参与者字符错误率中位数平均仅为29%,部分参与者通过脑电解码得到的句子完全正确率达到了30%。相对高效的解码性能得益于三个独立音节元素解码器的优秀表现和智能语言模型的完美配合。特别的是在分类21个声母方面,声母解码器的准确率超过了40%(超过3倍基准线),并且Top 3正确率几乎达到了100%;而用于区分4个声调的声调解码器的准确率也达到了50%(超过2倍基准线)。除了三个独立音节元素解码器的突出贡献以外,智能语言模型强大的自动纠错能力和上下文联系能力也让整个语言脑机接口系统的表现更为突出。
这项研究为汉语这种意音文字语言的BCI解码研究提供了全新视角,也证明通过强大的语言模型可显著提高语言脑机接口系统的性能,为未来的意音文字语言神经假肢研究提供了新的方向。该项工作也预示着神经系统疾病患者很快就能通过意念来控制计算机生成汉语句子,重获交流能力!
参考内容
https://www.biorxiv.org/content/10.1101/2023.11.05.562313v1.full.pdf
以上就是《重要突破!西湖大学团队和浙二医院共同实现脑机接口中文解码》的详细内容,更多关于的资料请关注golang学习网公众号!
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
501 收藏
-
250 收藏
-
475 收藏
-
440 收藏
-
142 收藏
-
165 收藏
-
285 收藏
-
369 收藏
-
240 收藏
-
192 收藏
-
284 收藏
-
438 收藏
-
299 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习