当前位置:

首页 > 硬件相关 > 小米开源自动驾驶模型实现VLA与世界模型技术的统一

小米开源自动驾驶模型实现VLA与世界模型技术的统一

小米开源自动驾驶模型XiaomiOneVL,首次将视觉语言动作模型与世界模型统一于潜空间推理框架。该模型融合大语言模型推理能力,在精度与速度上实现突破,刷新多项基准测试性能上限,并具备语言与视觉双维度可解释性,助力构建可信自动驾驶系统。相关模型与代码已全面开源。

自动驾驶的技术路线,过去常常给人一种“分道扬镳”的感觉。一边是视觉语言动作模型,专注于理解当下场景并输出驾驶指令;另一边是世界模型,致力于预测未来环境的演变。两者各有侧重,但能否合二为一,实现更高效、更强大的推理?小米技术最新开源的Xiaomi OneVL一步式潜空间语言视觉推理框架,给出了一个开创性的答案。

简单来说,这个模型做了一件业内率先实现的事:它将VLA、世界模型以及潜空间推理这几条关键技术路线,统一到了同一个框架之下。这意味着,它既继承了大型语言模型强悍的推理能力,又在推理速度和精度上取得了显著突破。官方数据显示,其精度超越了显式思维链方案,而在速度上,则能与直接输出答案的潜空间思维链方案看齐。

那么,这种统一具体是如何实现的?核心在于“潜空间推理”。传统的显式推理需要模型一步步“思考”并输出中间过程,而潜空间推理则将这些复杂过程压缩在模型内部的高维空间中完成,直接输出结果。Xiaomi OneVL正是利用这一特性,首次将场景理解与未来预测统一到了同一套潜空间框架中,让模型能同时处理“现在该做什么”和“接下来会怎样”这两个核心问题。

效果如何?数据是最直接的证明。在涵盖感知、推理与规划的多个主流基准测试中,Xiaomi OneVL全面刷新了潜在推理方法的性能上限。

▲ 在 ROADWork、Impromptu、Alpamayo-R1 三项基准上均达到 SOTA,在 NA VSIM 上取得优越性能

更值得关注的是,这个模型还解决了AI决策的“黑箱”难题。它能够为每一次决策提供双维度的可解释性:既可以用自然语言解释“为什么这样开”,也能用生成的视觉画面展示“接下来会发生什么”。这种“既说得清,又看得见”的能力,对于构建可信、可靠的自动驾驶系统至关重要。

▲ 为模型决策提供语言以及视觉的可解释性

目前,小米已经将Xiaomi OneVL的模型权重、训练及推理代码全面开源,旨在推动整个领域的研究与应用。相关资源汇总如下:

  • 技术报告:https://arxiv.org/abs/2604.18486
  • 项目主页:https://Xiaomi-Embodied-Intelligence.github.io/OneVL
  • 开源代码:https://github.com/xiaomi-research/onevl
本文内容来源于网友投稿,如有侵权请联系删除。
作者最新文章
硬件相关 小米
相关文章 更多
显卡风扇不转怎么回事判断是否正常及解决方法
显卡风扇不转怎么回事判断是否正常及解决方法

发现显卡风扇不转先别慌,这很可能是正常的智能启停功能。本文详解如何区分待机静音与硬件故障,提供从软件检测到物理清理的完整解决思路。

笔记本加内存条后无法开机怎么办及解决方法
笔记本加内存条后无法开机怎么办及解决方法

笔记本加装新内存后遇到黑屏或无法开机?不要慌张,本文通过重新插拔、清洁金手指、单根测试等具体操作步骤,帮你快速判断是安装失误还是硬件不兼容,并给出相应解决办法。

电脑主机前置usb不能用怎么解决排查修复教程
电脑主机前置usb不能用怎么解决排查修复教程

针对电脑主机前置USB接口无法识别设备的问题,本文提供一套基于因果逻辑的排查流程。涵盖检查机箱内部USB针脚连接、验证BIOS中USB控制器状态、更新芯片组驱动以及排除供电不足等常见原因,帮助用户快速恢复接口功能。

无线鼠标充不进电解决办法及故障排查步骤
无线鼠标充不进电解决办法及故障排查步骤

遇到无线鼠标充不进电的问题,不要急于更换设备。本文详解从清理接口氧化层、更换数据线到检测电池电压的完整排查流程,帮助你判断是临时故障还是硬件损坏。

蓝牙游戏手柄连接教程吃鸡
蓝牙游戏手柄连接教程吃鸡

想知道如何用蓝牙手柄玩吃鸡游戏?本文详细讲解手机蓝牙手柄的连接步骤、主流映射软件的使用方法以及实战中的键位布局技巧,助你提升射击手感,同时解析外设玩家的匹配机制与注意事项。

游戏手柄蓝牙连接为何每次都要重连原因排查与解决方法
游戏手柄蓝牙连接为何每次都要重连原因排查与解决方法

本文深入分析游戏手柄蓝牙频繁断开且需重连的根本原因,涵盖电池电压检测、操作系统电源管理策略及驱动冲突。通过具体的系统设置调整和固件更新步骤,解决蓝牙握手失败问题,恢复手柄的稳定连接状态。

显示器画面模糊抖动怎么解决及排查方法教程
显示器画面模糊抖动怎么解决及排查方法教程

遇到显示器画面模糊或抖动时,可通过检查视频连接线、调整系统分辨率与刷新率、更新显卡驱动等步骤进行排查和修复。

小米智能门锁换电池后怎么开机
小米智能门锁换电池后怎么开机

小米智能门锁更换新电池后无法开机或屏幕不亮?本文详解电池极性检查、金属触点清洁及强制重启方法,帮你快速解决供电问题,让门锁恢复正常使用。

电视机声音怎么连接到外置音响
电视机声音怎么连接到外置音响

想让电视声音更震撼?本文详解如何通过HDMI ARC、光纤、蓝牙和3.5mm接口将电视连接至外置音响,包含具体设置步骤与常见问题排查,助你轻松打造家庭影院。

打印机加墨水后打印不出颜色的原因及解决方法
打印机加墨水后打印不出颜色的原因及解决方法

解决打印机加墨水后打印无色的问题,涵盖墨盒芯片计数器重置、喷头气锁排除方法以及驱动程序颜色设置检查,帮助用户快速恢复彩色打印功能。

查看更多
精品专题 更多
装机必备
装机必备

正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

Windows
Windows

正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

macOS软件
macOS软件

正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

Mac软件 更多
photoshop
photoshop
Windows、macOS 、 iPad

Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件,支持 Windows、macOS 和 iPad 等平台,广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。

Blender
Blender
Windows、macOS 和 Linux

Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。

灵活计算器
灵活计算器
macOS/iOS/Android

灵活计算器是一款笔记式算数应用,支持实时计算、动态关联和云端同步功能。记录、整理和输出之间的过渡会更自然,适合长期写作、做笔记或持续沉淀个人内容。

WINDOWS 更多
3dmax(3ds max)
3dmax(3ds max)
Windows

Autodesk 3ds Max 是一款专业的三维建模、动画与渲染软件,广泛应用于建筑可视化、游戏开发、影视动画、广告设计和产品展示等领域。

photoshop
photoshop
Windows、macOS 、 iPad

Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件,支持 Windows、macOS 和 iPad 等平台,广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。

Blender
Blender
Windows、macOS 和 Linux

Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。