当前位置:

首页 > 业界资讯 > 国内团队实现脑机接口「全谱汉语解码」,Top 3准确率近乎100%的重大突破

国内团队实现脑机接口「全谱汉语解码」,Top 3准确率近乎100%的重大突破

今年八月,两篇背靠背《自然》文章展示了脑机接口在语言恢复方面的强大能力,单现有的语言脑机接口技术多是为「英文等字母语言」体系构建而成,针对「汉字等非字母体系」的语言脑机接口系统研究仍是空白。最近,先进神经芯片中心默罕默德·萨万教授团队,自然语言处理实验室张岳教授团队和朱君明教授团队联合发布了他们最新的研究结果,实现了脑机接口全谱汉语解码,一定程度弥补了国际上汉语解码脑机接口技术的空白。图片论文地址:https://www.biorxiv.org/content/10.1101/2023.11.05.562

今年八月,两篇背靠背《自然》文章展示了脑机接口在语言恢复方面的强大能力,单现有的语言脑机接口技术多是为「英文等字母语言」体系构建而成,针对「汉字等非字母体系」的语言脑机接口系统研究仍是空白。

最近,先进神经芯片中心默罕默德·萨万教授团队,自然语言处理实验室张岳教授团队和朱君明教授团队联合发布了他们最新的研究结果,实现了脑机接口全谱汉语解码,一定程度弥补了国际上汉语解码脑机接口技术的空白。

国内团队实现脑机接口「全谱汉语解码」,Top 3准确率近乎100%的重大突破图片

论文地址:https://www.biorxiv.org/content/10.1101/2023.11.05.562313v1

此项研究通过立体定向脑电技术(SEEG)采集所有普通话汉字发音过程对应的大脑内神经活动信号,结合深度学习算法和语言模型,实现了对全谱汉字发音的解码,建立起覆盖所有汉语普通话字符发音的汉语脑机接口系统,实现了大脑活动到完整普通话句子的端到端输出。

脑机接口解码汉语

BCI,即脑机接口,被广泛认可为未来生命科学和信息技术的交叉融合领域的核心。这是一个具有重要社会价值和战略意义的研究方向

脑机接口技术是一种新型的信息传输渠道,旨在为人类或动物的脑部与外部设备之间建立信息交换的连接通路。它使得信息可以绕过原有的肌肉及外围神经通路,从而实现与外部世界的连通,从某种程度上替代人类的运动、语言等功能

汉语作为一种象形和音节结合的语言,具有超过50000个字符,与由26个字母组合而成的英语具有显著不同,因此这对于现有的语言脑机接口系统来说是一个巨大的挑战。

为了解决这个问题,研究团队在过去三年里深入分析了汉语的发音规则和特点。他们从汉语发音音节的声母、声调和韵母三个要素出发,并结合拼音输入系统的特点,设计了一个全新的适用于汉语的语言脑机接口系统

研究小组创建了一个超过100小时的汉语语音-SEEG数据库,他们设计了一个涵盖所有407个汉语拼音音节以及汉语发音特点的语音库,并同步收集了脑电信号

该系统通过训练人工智能模型来构建预测模型,用于汉字发音音节三要素(声母、声调和韵母)的预测。最后,该系统通过一个语言模型将所有预测得到的元素进行整合,并结合语义信息生成最可能的完整汉语句子

国内团队实现脑机接口「全谱汉语解码」,Top 3准确率近乎100%的重大突破图片

研究小组对一个脑机接口系统在日常汉语环境中的解码能力做了评估。在超过一百次随机选择的、由两个字符到十五个字符组成的复杂交流场景的解码测试中,所有参与者的字符错误率中位数平均为29%,有些参与者通过脑电解码得到的句子完全正确率达到了30%

相对高效的解码性能得益于三个独立音节元素解码器的优秀表现和智能语言模型的完美配合。特别的是在分类21个声母方面,声母解码器的准确率超过了40%(超过3倍基准线),并且Top 3正确率几乎达到了100%;而用于区分4个声调的声调解码器的准确率也达到了50%(超过2倍基准线)。

智能语言模型在整个语言脑机接口系统中表现突出,除了三个独立音节元素解码器的重要贡献外,其强大的自动纠错能力和上下文联系能力也起到了关键作用

国内团队实现脑机接口「全谱汉语解码」,Top 3准确率近乎100%的重大突破图片

这项研究为汉语这种意音文字语言的BCI解码研究提供了全新视角,也证明了通过强大的语言模型可以显著提高语言脑机接口系统的性能,为未来意音文字语言神经假肢研究提供了新的方向

这项工作的意义在于,它预示着神经系统疾病患者很快就能通过意念来控制计算机生成汉语句子,从而恢复交流能力!

参考资料:

https://www.biorxiv.org/content/10.1101/2023.11.05.562313v1

本文内容来源于互联网,如有侵权请联系删除。
作者最新文章
业界资讯
相关文章 更多
面向接口编程与面向实现编程
面向接口编程与面向实现编程

面向接口编程将轮胎共同特性抽象为接口,汽车仅依赖接口而非具体品牌,实现灵活替换。与之对比,面向实现编程绑定具体类,导致代码难以扩展。该原则提升可复用性与可维护性。

Java如何用接口实现多继承?OOP接口方法详解
Java如何用接口实现多继承?OOP接口方法详解

Java通过接口实现多继承效果,类可实现多个接口以获得多种行为。例如Duck类实现Flyable和Swimmable接口,具备飞行与游泳能力。自Java8起,接口支持默认方法,若两接口含同名默认方法,实现类须显式重写以解决冲突,如MyClass重写show()并选择调用A.super.show()。接口多继承优势包括提升灵活性、避免菱形问题、利于解耦与模块化设计。建议遵循接口隔离原则,拆分功能为小接口,按需实现,合理设计职责,避免过度耦合。

抽象类和接口有什么区别 纯虚函数使用场景对比
抽象类和接口有什么区别 纯虚函数使用场景对比

抽象类用于实现共性行为和状态的复用,而接口用于定义能力契约;在C++中,抽象类可包含具体方法和成员变量,支持单或多继承,强调“is-a”关系,适合有共同代码的场景,而接口通过纯虚类模拟,所有方法为纯虚函数,无实例变量,体现“has-capability”,支持多继承且避免菱形问题,适用于跨模块解耦和多态组合;纯虚函数通过=0声明,使类成为抽象基类,派生类必须重写纯虚函数才能实例化;实际选择时,若需共享状态或默认实现应使用抽象类,若仅定义行为规范且要求类实现多种角色则应使用纯虚类作为接口;无论哪种都应提供虚

Java中接口的实现方法详解
Java中接口的实现方法详解

接口是引用类型,用于定义行为规范,包含抽象方法和默认方法,通过implements实现,支持多接口组合,提升代码灵活性与可维护性。

C#接口是什么?如何实现与使用接口
C#接口是什么?如何实现与使用接口

<p>接口在C#中定义行为规范,仅声明成员签名而不实现,类或结构体通过实现接口来提供具体逻辑。接口不能包含字段或构造函数,默认所有成员为公共抽象,从C#8.0起可有默认实现但通常仍以抽象为主。示例中定义IVehicle接口并由Car类实现,必须提供Start、Stop和GetInfo方法的具体public实现。通过接口类型引用对象可实现多态,如IVehiclevehicle=newCar()调用对应方法。多个类可实现同一接口,运行时根据实际对象执行不同逻辑,如Bike类也实现IVehicle。

.NET中接口与抽象类的区别解析
.NET中接口与抽象类的区别解析

接口支持多实现,抽象类仅单继承;抽象类可包含字段和实现,接口主要用于定义行为规范;接口强调“能做什么”,抽象类表达“是什么”;修改接口影响所有实现,抽象类更易扩展。

Golang内置接口与自定义接口实战解析
Golang内置接口与自定义接口实战解析

Go语言通过接口实现多态,核心在于“行为”而非“类型”。1.内置接口如error、fmt.Stringer、io.Reader/Writer规范常见行为;2.自定义接口如Storage可抽象数据操作,支持多种实现;3.最佳实践提倡小接口、组合复用、使用方定义接口,提升代码可读性与扩展性。

串口差异大?RS232与RS485对比解析
串口差异大?RS232与RS485对比解析

在当今的工业领域中,物联网(IoT)、数据采集和通讯技术已成为工程师们不可忽视的关键元素。尽管无线和以太网通讯在多数场景中备受推崇,但串行通讯设备在实际应用中依然占据重要地位。RS485和RS232作为两种常见的串行通信标准,在工业和电子领域中广泛应用。那么,这两种接口各自的优缺点是什么呢?许多人可能对此并不完全了解,下面我们将详细探讨这两种接口的特性。RS485的定义是什么?RS-485总线标准明确规定了接口的电气特性,包括两个逻辑状态的定义:当电平在+2V至+6V之间时,表示一种逻辑状态;当电平在-2

Siri等明年!苹果WWDC25给AI交底:画小饼,继续熬
Siri等明年!苹果WWDC25给AI交底:画小饼,继续熬

不求速胜,熬吧。

比特现金未来:可扩展性与支付潜力
比特现金未来:可扩展性与支付潜力

比特现金(BCH)的未来发展前景看好。凭借其可扩展性、支付采用、价值存储、智能合约和坚实的社区支持,比特现金有望在多个领域取得显著发展,成为一种多功能且广泛使用的加密货币。

查看更多
精品专题 更多
装机必备
装机必备

正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

Windows
Windows

正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

macOS软件
macOS软件

正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

Mac软件 更多
灵活计算器
灵活计算器
macOS/iOS/Android

灵活计算器是一款笔记式算数应用,支持实时计算、动态关联和云端同步功能。记录、整理和输出之间的过渡会更自然,适合长期写作、做笔记或持续沉淀个人内容。

赤友清理大师
赤友清理大师
macOS

赤友清理大师是一款为 Mac 设计的智能清理优化工具,可精准扫描垃圾、大文件、重复文件等,释放磁盘空间。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

极度公式
极度公式
Windows/macOS/Linux

极度公式是一款跨平台专业LaTeX公式识别编辑软件,支持OCR公式识别和多平台编辑。和使用说明,避免使用,享受完整功能与稳定支持。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

WINDOWS 更多
Windows 10
Windows 10
Windows

Windows 10 是一款微软推出的经典操作系统,拥有硬件兼容性与多任务处理能力。它更偏向把系统状态查看和常用调节动作放在一起,适合需要持续观察和微调设备状态的场景。

极度公式
极度公式
Windows/macOS/Linux

极度公式是一款跨平台专业LaTeX公式识别编辑软件,支持OCR公式识别和多平台编辑。和使用说明,避免使用,享受完整功能与稳定支持。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

密码键盘
密码键盘
Windows/macOS/iOS/Android

密码键盘是一款兼具安全性与便捷性的高效密码管理器。日常使用里的持续防护和信息管理会更突出,适合把安全控制放进长期使用流程中的场景。