当前位置:

首页 > 业界资讯 > 三星XR专利分享用脑机接口提供完整感官反馈刺激——嗅觉、味觉等

三星XR专利分享用脑机接口提供完整感官反馈刺激——嗅觉、味觉等

(映维网Nweon2023年11月27日)根据早前的情报,三星已经制定了完整的元宇宙战略,并旨在构建一个以三星为中心的XR生态系统,并且正在积极招揽人才。根据专利申请,这家公司实际上已经将终极的脑机接口纳入至考虑之中。过去,脑机接口的研究在Meta、Valve和其他初创公司中较为常见。当然,像微软这样的公司也曾进行过探索。如今,积极布局XR领域的公司开始探索更先进的脑机接口。三星在一份名为“信息生成方法和设备”的专利申请中,提出将脑机接口应用于XR的感官反馈刺激领域这家公司认为,在XR技术中,各种感官模拟

(映维网Nweon 2023年11月27日)根据早前的情报,三星已经制定了完整的元宇宙战略,并旨在构建一个以三星为中心的XR生态系统,并且正在积极招揽人才。根据专利申请,这家公司实际上已经将终极的脑机接口纳入至考虑之中。

过去,脑机接口的研究在Meta、Valve和其他初创公司中较为常见。当然,像微软这样的公司也曾进行过探索。如今,积极布局XR领域的公司开始探索更先进的脑机接口。三星在一份名为“信息生成方法和设备”的专利申请中,提出将脑机接口应用于XR的感官反馈刺激领域

这家公司认为,在XR技术中,各种感官模拟主要是基于传感器实现。但每一种感官模拟都是通过一种传感器来实现,所以过程操作繁琐。另外,传感器不够全面,所以有诸多模拟无法实现。换句话说,使用相关传感器所获得的效果与真实相去甚远,用户无法获得逼真的模拟。

所以,三星提出可以利用脑机接口设备来提供逼真的感官模拟。其中,系统可以获取关于用户在虚拟环境中相对于目标对象的位置信息,然后基于所述位置信息和属性信息来确定与目标对象相对应的感官信息,最后将感测信息转换为电信号并通过脑机接口设备来刺激用户。

三星XR专利分享用脑机接口提供完整感官反馈刺激——嗅觉、味觉等

根据示例实施例,图2展示了相关的信息生成流程图200。信息生成方法包括获取用户相对于虚拟环境中目标对象的相对位置信息的操作201

在一个实施例实施例,可以将相互合作工作的一个或多个设备称为执行实体。执行实体可以建立空间直角坐标系,实时获取所述直角坐标系中用户的位置信息和所述虚拟环境中目标对象的位置信息,并根据所述用户的位置信息和所述目标对象的位置信息确定所述用户相对于所述目标对象的相对位置信息。

所述执行实体可周期性地获取所述用户在直角坐标系中的位置信息和所述虚拟环境中所述目标对象的位置信息。目标对象可以是虚拟环境中的任何目标对象,例如桌子、水杯、面包等。

在操作202中,基于目标对象的相对位置信息和属性信息确定与目标对象相对应的感官信息。

根据示例实施例,在获取虚拟环境中用户相对于目标对象的相对位置信息后,执行实体可根据对应表或感官信息预测模型进一步确定与目标对象对应的感官信息。例如,对应表可以存储预定的相对位置信息、目标对象的属性信息和相互关联的感官信息。感官信息预测模型可以是通过执行训练操作确定的预定感官信息预测模型。

根据示例实施例,我们可以使用目标对象的相对位置信息和带有感官信息的属性样本来训练模型,从而得到预测感官信息的模型

目标对象的感官信息可以包括触觉、听觉、嗅觉或味觉中的至少一种。感官信息可以用刺激参数来表示。刺激参数可以根据用户在真实环境中对目标对象实际产生的感官信息来确定

有趣的是,三星提出相关刺激器可以是脑机初创公司Blackrock的完全可编程96通道神经刺激器CereStim。但当然,这家公司表示所述设备只是其中一种选择,发明可以采用其他模拟器。

在一个示例场景中,用户触碰30摄氏度的对象,电极活动通过使用神经端口神经信号收集器来记录。电极记录的神经活动放大,并以30 kHz的采样频率进行模拟-数字(A/D)采样,然后使用神经端口神经信号处理器NSP系统记录。然后,通过CereStim 的Matlab API编写刺激参数,并通过不同的脉冲刺激和调节电流强度再次获取电极信号。当电极信号彼此无限靠近时,它们可以触摸30摄氏度对象的刺激参数。

同样,可以得到触觉、听觉或嗅觉的任何刺激参数。

在进行203操作时,该方法包括将感官信息转化为电信号,并通过脑机接口设备来刺激用户

在确定与目标对象相对应的感官信息之后,执行实体可以使用脑机接口设备将这些感官信息转换为电信号,然后通过刺激使用者大脑皮层中的相应部位来产生相应的感觉

根据另一示例实施例,基于目标对象的相对位置信息和属性信息确定与目标对象相对应的感官信息的操作可包括,基于用户面部朝向和用户头部与目标对象之间的距离确定与目标对象相对应的嗅觉信息;并确定嗅觉信息作为与目标对象相对应的感官信息。

根据另一示例实施例,所述方法可包括确定目标对象具有气味属性,根据用户面部朝向和用户头部与目标对象之间的距离确定与目标对象相对应的嗅觉信息。响应或基于确定目标对象具有气味属性,将嗅觉信息确定为与目标对象相对应的感官信息。

气味属性可包括水果香气、花香气、食物香气等属性信息。

在一个实施例中,通过利用目标对象的相对位置信息和属性信息来确定与目标对象相关的感官信息。在确认目标对象具有声音属性的基础上,可以根据用户脸部的方向和用户头部与目标对象之间的距离来确定与目标对象相关的听觉信息,然后将听觉信息确定为与目标对象相关的感官信息

执行实体可以利用用户头部左右两侧的可穿戴定位设备确定用户的左侧坐标和右侧坐标,进一步确定连接用户头部左侧坐标和右侧坐标的线,并根据所述线与所述目标对象的坐标所在的平面方向之间的夹角确定用户面部的朝向。

三星XR专利分享用脑机接口提供完整感官反馈刺激——嗅觉、味觉等

根据图3所示,通过使用UWB基站作为原点,执行实体301可以建立一个空间直角坐标系,并通过使用用户头部左侧的第一可穿戴定位设备303和用户头部右侧的第二可穿戴定位设备304,获取与用户头部相对应的坐标A和B

根据示例实施例,可穿戴定位设备303和304可以是UWB芯片。UWB基站可由执行实体301实现。坐标A对应于芯片303,即用户头部左侧的坐标,坐标B对应于芯片304,即用户头部右侧的坐标。

同时,得到目标对象305的坐标M,确定直线AB与M所在平面方向夹角为用户的面向。这里,目标对象305为虚拟花朵,执行实体可以根据用户的面部朝向和用户头部与目标对象的距离,从预定对应表中确定与目标对象对应的嗅觉信息,并确定嗅觉信息为与目标对象对应的感官信息。对应表相应记录了用户的面部朝向、用户头部与目标对象的距离、以及相互关联的嗅觉信息。

本实施例中,通过使用用户头部左右两侧的可穿戴定位设备,确定用户头部左右两侧的坐标。通过计算连接用户头部左右两侧坐标的直线与目标对象坐标所在平面方向之间的夹角,来确定用户面部的方向。这样有效地提高了确定用户面部朝向的精度

执行实体可以根据用户头部相对于目标对象的相对位置信息进行检测,并且根据确定目标对象位于用户头部的预定位置以及目标对象具有可食用属性的条件,确定与可食用属性相对应的味觉信息作为与目标对象相对应的感官信息

可以包括属性信息,如香蕉味道、苹果味道等

应当注意,在确定目标对象位于用户头部的预定位置之前,可能存在用户触碰目标对象的动作,或可能不存在用户在预定时间范围内触碰目标对象的动作。

在一个实施例,通过确定用户的手与目标对象之间的距离是否满足预定阈值,可以确定是否存在用户触摸虚拟对象的动作。

本实施例中,首先根据目标对象在用户头部的预定位置和其具有可食用属性,确定了可食用属性对应的味觉信息作为目标对象的感官信息。然后将该感官信息转化为电信号,并通过脑机接口设备刺激用户,从而帮助用户在虚拟环境中体验到对象的可食用属性,提升互动的真实性

三星XR专利分享用脑机接口提供完整感官反馈刺激——嗅觉、味觉等

示意图展示了信息生成方法的应用场景,如图4所示

在图4所示的应用场景中,实体401可以以UWB基站为原点建立一个空间直角坐标系。通过在用户402的一个或多个身体部位上使用可穿戴定位设备,可以获取用户在空间直角坐标系中的位置信息

例如,可穿戴定位设备可设置在用户的手上和头上。UWB基站可由执行实体401实现。根据示例实施例,所述实体可以获取目标对象403上的位置信息,例如虚拟足球,从而根据所述用户的位置信息和所述目标对象上的位置信息确定用户相对于所述目标对象的相对位置信息。

接下来,根据对应表来确定目标对象所对应的感官信息。这个对应表中记录了目标对象的预定相对位置信息、属性信息(比如平滑度、柔软度等)以及相应的感官信息。然后,将这些感官信息转换成电信号,并通过脑机接口设备来刺激用户402

所述信息生成方法可包括获取用户相对于虚拟环境中目标对象的相对位置信息,根据所述目标对象的相对位置信息和属性信息确定与所述目标对象相对应的感官信息,并通过脑机接口设备将所述感官信息转换为电信号以刺激用户;这有助于用户在虚拟环境中体验到对象的属性,提高交互的真实性。

请参考图5,这是信息生成方法的流程图500

三星XR专利分享用脑机接口提供完整感官反馈刺激——嗅觉、味觉等

在501的操作中,可以通过信息生成方法获取用户相对于虚拟环境中目标对象的相对位置信息

在进行502操作时,如果确定用户的手与目标对象之间的距离满足预设的阈值,并且目标对象具有轮廓特征,那么就会确定与目标对象轮廓特征相对应的触觉信息作为与目标对象相对应的感官信息

重写后的内容:所述的相对位置信息可以包括用户手与目标对象之间的相对位置信息,执行实体可以检测用户手与目标对象之间的距离。为了响应于确定用户手与目标对象之间的距离满足预定阈值,并且目标对象具有轮廓属性,将目标对象轮廓属性对应的触觉信息确定为目标对象对应的感官信息

可以包括轮廓、材质、纹理、光滑度、温度、质量等属性信息

其中,可根据体验、实际需求和具体应用场景设置预定阈值。例如,手指和/或手掌与目标对象之间的距离小于或等于1cm,或者手指和/或手掌与目标对象之间的距离小于或等于0.5 cm,在本公开中不受限制。

具体来说,该系统以UWB基站为原点建立空间直角坐标系,使用佩戴在用户手上的数据手套获取用户手部位置信息,同时获取目标物体的位置信息。该目标物体为水杯,且预设的阈值为使用者的手指和/或手掌与水杯的距离小于或等于1厘米

为了满足预定的阈值,确定使用者手指和/或手掌与水杯之间的距离,同时考虑到水杯的轮廓属性,将与水杯轮廓属性相对应的触觉信息确定为水杯的感官信息

在操作503中,包括通过脑机接口设备将感官信息转换为电信号以刺激用户。

与图2示例实施例所示的方法相比,根据图5流程图500所示的方法,为了确定用户的手与目标对象之间的距离满足预定阈值,并且目标对象具有轮廓属性,将目标对象的轮廓属性对应的触觉信息确定为目标对象对应的感官信息。

通过脑机接口设备,将用户感知的信息转化为电信号,并通过刺激用户来帮助他们在虚拟环境中体验到物体的轮廓属性,以提高交互的真实性

延伸阅读:Samsung Patent | Information generation method and device

名为“Information generation method and device”的三星专利申请最初在2023年7月提交,并在日前由美国专利商标局公布。

通常情况下,美国专利申请在接受审查后,会在申请日或优先权日起的18个月内自动公布或根据申请人的要求进行公开。需要注意的是,专利申请的公开并不代表专利已经被授予。在专利申请公开后,美国专利商标局需要进行实质性审查,这个过程可能需要1年至3年的时间

本文内容来源于互联网,如有侵权请联系删除。
作者最新文章
业界资讯
相关文章 更多
活力中国调研行|脑机接口走近你我生活
活力中国调研行|脑机接口走近你我生活

脑机接口技术通过“读脑”与“重塑”实现运动康复和听力改善,“神工-神驰”等设备已帮助偏瘫患者逐步恢复运动能力,听障儿童语言感知显著提升。我国非侵入式脑机接口处于国际并跑或领跑,设备正向便携化、家用化发展,并拓展至航天、工业等领域。

东部战区总医院植入式脑机接口研究招募患者
东部战区总医院植入式脑机接口研究招募患者

东部战区总医院启动无线全植入式脑机接口临床研究,针对脊髓损伤、脑干卒中、肌萎缩侧索硬化症等导致四肢瘫痪或语言障碍患者,免费提供植入设备及全部医疗费用,要求年龄18至70岁,病情稳定至少6个月。

脑韵入耳式脑电耳机京东健康首发上线 撬动脑机接口消费级市场扩容
脑韵入耳式脑电耳机京东健康首发上线 撬动脑机接口消费级市场扩容

脑韵科技推出入耳式脑电耳机,在京东健康首发。该非侵入式设备通过耳道采集脑电信号,实现脑电追踪、状态评分、健脑训练及长期报告,帮助用户实时了解大脑状态并管理专注力与放松。

脑机接口临床准入门槛提高,划清“消费”与“医疗”界限
脑机接口临床准入门槛提高,划清“消费”与“医疗”界限

脑虎科技自主研发的植入式脑机接口系统在华山医院启动临床试验,用于颈段脊髓损伤致四肢瘫痪患者上肢功能代偿。作为药监局新规后首个临床,明确侵入式按三类医疗器械管理,消费级不属医疗器械,划清医疗与消费界限。

脑机接口、VR体验……暑假,点亮青少年科技梦想
脑机接口、VR体验……暑假,点亮青少年科技梦想

四川省“点亮科技梦想”青少年科普系列活动首站在仪陇县举行,通过脑机接口、VR游戏、无人机航模表演及手工制作等互动体验,激发青少年科技兴趣。同期,电子科技大学脑智明珠科普实践基地揭牌,推动前沿科技资源下沉基层。

活力中国调研行|记者实测脑机接口,看“科幻”如何落地到临床
活力中国调研行|记者实测脑机接口,看“科幻”如何落地到临床

记者实测脑机接口康复系统,头戴电极帽想象握拳即可触发电刺激带动手指活动。非侵入式产品已应用于临床康复和消费监测。专家指出侵入式与非侵入式将顶峰相见,脑控神话不存在,产业需在精度与实用性间平衡。

华山医院牵头、15家三甲联动,脑虎“三全”脑机接口启动注册临床试验
华山医院牵头、15家三甲联动,脑虎“三全”脑机接口启动注册临床试验

脑虎科技自主研发的“植入式脑机接口手部运动功能代偿系统”在华山医院启动GCP注册临床试验,为国内首款硬膜下皮层植入式脑机接口产品。该系统采用全植入、全无线、全功能设计,联合15家三甲医院多中心协作,旨在验证对四肢瘫痪患者上肢功能代偿的安全性与有效性。

脑机接口2026:72亿资本涌入,产业化正在跨越临界点
脑机接口2026:72亿资本涌入,产业化正在跨越临界点

截至2026年6月,脑机接口领域投融资达72.53亿元,远超上年全年。Neuralink完成首例经硬脑膜植入手术,降低创伤。国内三条技术路线并行,非侵入式在医疗康复与消费领域率先实现商业化落地,获得医保支持,正加速产业化进程。

活力中国调研行|脑机接口“珠峰”攻坚有了最强后援团
活力中国调研行|脑机接口“珠峰”攻坚有了最强后援团

国内首个脑机接口未来产业集聚区“脑智天地”已入驻50家企业,形成从研发到临床的完整闭环。明视脑机聚焦视觉重建,通过皮层刺激等技术为全盲人群搭建人工视觉通路,攻克“珠峰”级难题。

活力中国调研行|梦想照进现实,脑机接口为患者点亮新生希望
活力中国调研行|梦想照进现实,脑机接口为患者点亮新生希望

脑机接口技术正从实验室走向临床应用,在上海脑智天地集聚区,侵入式视觉重建系统为全盲患者带来黑白轮廓感知,非侵入式脑电康复设备已获批用于脑卒中上肢康复训练,上海正推动多方协同创新,加速技术落地。

查看更多
精品专题 更多
装机必备
装机必备

正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

Windows
Windows

正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

macOS软件
macOS软件

正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

Mac软件 更多
灵活计算器
灵活计算器
macOS/iOS/Android

灵活计算器是一款笔记式算数应用,支持实时计算、动态关联和云端同步功能。记录、整理和输出之间的过渡会更自然,适合长期写作、做笔记或持续沉淀个人内容。

赤友清理大师
赤友清理大师
macOS

赤友清理大师是一款为 Mac 设计的智能清理优化工具,可精准扫描垃圾、大文件、重复文件等,释放磁盘空间。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

极度公式
极度公式
Windows/macOS/Linux

极度公式是一款跨平台专业LaTeX公式识别编辑软件,支持OCR公式识别和多平台编辑。和使用说明,避免使用,享受完整功能与稳定支持。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

WINDOWS 更多
Windows 10
Windows 10
Windows

Windows 10 是一款微软推出的经典操作系统,拥有硬件兼容性与多任务处理能力。它更偏向把系统状态查看和常用调节动作放在一起,适合需要持续观察和微调设备状态的场景。

极度公式
极度公式
Windows/macOS/Linux

极度公式是一款跨平台专业LaTeX公式识别编辑软件,支持OCR公式识别和多平台编辑。和使用说明,避免使用,享受完整功能与稳定支持。做扫描整理、文字提取和表格转换时,它能把识别后的处理步骤接得更顺,资料录入这类场景会省下不少时间。

密码键盘
密码键盘
Windows/macOS/iOS/Android

密码键盘是一款兼具安全性与便捷性的高效密码管理器。日常使用里的持续防护和信息管理会更突出,适合把安全控制放进长期使用流程中的场景。