网易首页 > 网易号 > 正文 申请入驻

小米正式发布并全面开源自动驾驶模型Xiaomi OneVL

0
分享至

5月13日,@小米技术 宣布正式发布并全面开源自动驾驶模型Xiaomi OneVL:一步式潜空间语言视觉推理框架。它将VLA、世界模型和潜空间推理三大技术路线统一到同一框架中,让大模型推理“又快又准”:精度上超越显式思维链,速度上对齐“仅答案”预测,推理延迟最低仅0.24秒,为传统VLA自回归推理的5.4%,为量产车端实时部署提供了可行路径。



1、Xiaomi OneVL:让大模型推理“既快又准”

今年 3 月,小米正式发布全新小米 XLA 认知大模型架构,标志着小米辅助驾驶技术路线从“感知与模仿”迈向“理解与推理”。相比传统 VLA,XLA 强调更丰富的多模态认知输入,以及更强的场景认知、行为推理与真实世界理解能力。

在 XLA 的技术方向下,一个核心问题随之浮现:当大模型具备了推理能力,如何让这种推理既快又准?

行业过往的解决方案都有明显的缺陷:显式思维链(CoT)能显著提升轨迹规划质量,但逐 token 生成带来的额外时延,也对真实驾驶场景中的实时决策提出了更高挑战;而跳过推理直接输出答案,又会丢失关键的因果判断能力。

为了解决这些缺陷,此前行业内提出了潜空间思维链(Latent CoT)作为核心推理机制——用高维机器语言替代逐字生成的文本推理,在保持认知质量的同时大幅压缩推理时延。

而今天,小米技术研发团队在 Latent CoT 的基础上进一步探索自动驾驶大模型中的潜空间推理问题,正式推出——Xiaomi OneVL:一步式潜空间语言视觉推理框架。

作为 XLA 架构中 Latent CoT 能力的首次学术验证,Xiaomi OneVL 是首个在精度上超越显式思维链、在速度上对齐“仅答案”预测的潜在推理方案,并实现了 VLA 与世界模型的统一。



通过“语言推理 + 视觉未来预测”的双重监督,Xiaomi OneVL 将可解释性与世界模型的未来预测能力统一到 latent reasoning 中,为自动驾驶大模型探索出一条新的精度—效率平衡路径。

从这个意义上说,Xiaomi OneVL 进一步验证了 XLA 架构方向的技术潜力:真正面向现实世界的辅助驾驶,不只要看见当下,更要理解因果、预判未来,并在有限时间内完成高质量决策。

从家庭场景的具身智能到城市道路的辅助驾驶,小米正推动智能技术向“可用、可信、可扩展”的现实世界稳步迈进,为小米“人车家全生态”注入核心技术动能!



2、三项关键技术,统一 VLA、世界模型、潜空间推理三大技术路线

过去,VLA 和世界模型是自动驾驶领域两条相对独立的技术路线:VLA 专注于理解场景并输出驾驶动作,世界模型专注于预测未来场景的演变。Xiaomi OneVL 通过潜空间推理,首次将两者统一到同一套框架中。

它的核心洞察是:自动驾驶要压缩的,不只是语言推理,而是对未来世界变化的理解。 驾驶决策真正依赖的,并不只是“前方有车”“道路变窄”这样的语义描述,而是车辆运动、道路几何、障碍物演变等时空因果信息。压缩语言,丢掉的恰恰是最关键的因果结构;而压缩成“对未来视觉世界的预测”,才保留了真正决定驾驶结果的东西。

基于这一洞察,Xiaomi OneVL 提出三项关键技术。简单来说:让模型用自己的“内部语言”思考、让它学会预测未来画面、并把整个推理过程压缩到一步完成。

双模态 latent token,各司其职:视觉 latent token 编码“场景的物理因果结构”,语言 latent token 编码“驾驶意图的语义表达”,让模型“在心里想清楚”,而不是“边说边想”。

双辅助解码器,训练时用、推理时丢:视觉解码器预测未来 0.5s / 1s 的画面,让模型同时具备世界模型的未来预测能力;语言解码器重建人类可读的思维链文字,保障可解释性——两个解码器在训练中提供双重监督信号,推理时全部移除,零额外开销;

「预填充式」一步推理,快到极致:推理时丢掉两个解码器,所有 latent token 直接预填充进上下文,一次并行完成,延迟和“仅答案”模型几乎一致,比显式 CoT 最高快 2.3 倍。

3、多基准全面 SOTA,刷新潜在推理方法性能上限

在涵盖感知、推理与规划的多个主流基准上,Xiaomi OneVL 全面刷新了潜在推理方法的性能上限:

在 ROADWork、Impromptu、Alpamayo-R1 三项基准上均达到 SOTA,并在 NAVSIM 上取得优越性能,PDM-score 达到 88.84,首次在潜空间推理中超越显式 CoT(88.29);

目前唯一在所有基准上超越显式自回归 CoT 的隐式推理方法;

挂载 MLP 回归头变体,延迟进一步压到 0.24s(4.16 Hz),仅为 VLA 自回归推理的 5.4%,为量产车端实时部署提供了可行路径。

消融实验进一步验证,压缩物理世界的动态信息能带来显著的性能提升。

同时,Xiaomi OneVL 能为模型决策提供语言和视觉双维度的可解释性——既能用文字说明“为什么这样开”,也能用预测画面展示“接下来会发生什么”,将 XLA 所追求的“理解与推理”能力,真正落到了可验证、可解释的工程实践中。



为模型决策提供语言以及视觉的可解释性

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
伟大的2-0爆冷!卫冕冠军斯瓦泰克出局!亚洲小将杀疯 创历史一胜

伟大的2-0爆冷!卫冕冠军斯瓦泰克出局!亚洲小将杀疯 创历史一胜

大秦壁虎白话体育
2026-07-04 22:54:35
首富坐牢18年,妻子狠心远走!最后接他出狱的,是小28岁的小姨子

首富坐牢18年,妻子狠心远走!最后接他出狱的,是小28岁的小姨子

娱乐洞察点点
2026-07-04 20:19:10
给泰山安装刀片刺网,在古代要被砍头

给泰山安装刀片刺网,在古代要被砍头

黔有虎
2026-07-03 16:49:25
男子被姐夫杀害后续!刀刀捅要害,原因炸裂,网友:他姐才是凶手

男子被姐夫杀害后续!刀刀捅要害,原因炸裂,网友:他姐才是凶手

坠入二次元的海洋
2026-07-04 15:52:51
哈佛大学惊人发现:寿命长的人,从来不是靠多运动,而是这4点!

哈佛大学惊人发现:寿命长的人,从来不是靠多运动,而是这4点!

白宸侃片
2026-06-23 21:25:40
法国主帅怒喷:巴拉圭想废人!姆巴佩发声:对手踢得脏但我们赢了

法国主帅怒喷:巴拉圭想废人!姆巴佩发声:对手踢得脏但我们赢了

我爱英超
2026-07-05 07:52:28
电影口碑扑街,导演凌晨发文甩锅,实在本末倒置

电影口碑扑街,导演凌晨发文甩锅,实在本末倒置

草莓解说体育
2026-07-04 14:57:26
伊朗又在美国脸上狠狠一巴掌

伊朗又在美国脸上狠狠一巴掌

史政先锋
2026-07-04 22:14:16
演员陈龙晒检查报告“自证清白”,喊话马伊琍、papi酱:我脾气再暴躁都没你们说的这个病;李连杰曾因该病容貌大变

演员陈龙晒检查报告“自证清白”,喊话马伊琍、papi酱:我脾气再暴躁都没你们说的这个病;李连杰曾因该病容貌大变

天津族
2026-07-04 02:45:59
新四军惊天冤案:逼迫女教员三天三夜不合眼,黄克诚靠1碗热水破局

新四军惊天冤案:逼迫女教员三天三夜不合眼,黄克诚靠1碗热水破局

睡前讲故事
2026-07-03 17:03:11
中俄代表站首排,伊朗三号人物哭到颤抖,对中方说的四字分量很重

中俄代表站首排,伊朗三号人物哭到颤抖,对中方说的四字分量很重

健身狂人
2026-07-05 09:27:08
毛主席碰到贺子珍哥哥,得知他行政待遇才8级,主席不悦:瞎胡闹

毛主席碰到贺子珍哥哥,得知他行政待遇才8级,主席不悦:瞎胡闹

旧史新谭
2026-07-05 09:50:13
再见了!詹姆斯拒绝加盟!下家球队数量,减一

再见了!詹姆斯拒绝加盟!下家球队数量,减一

詹姆斯吧
2026-07-04 10:48:59
里奇·保罗:若布伦森亲自致电邀请詹姆斯,他会毫不犹豫加盟尼克斯

里奇·保罗:若布伦森亲自致电邀请詹姆斯,他会毫不犹豫加盟尼克斯

舟望停云
2026-07-04 11:07:20
哈梅内伊刚下葬,内贾德道出实情,美以计划落空,新领袖联手夺权

哈梅内伊刚下葬,内贾德道出实情,美以计划落空,新领袖联手夺权

全球风情大揭秘
2026-07-05 01:35:58
世界杯历史第一人!梅西获吉尼斯世界纪录认证 拒绝拥抱沃齐尼亚引争议

世界杯历史第一人!梅西获吉尼斯世界纪录认证 拒绝拥抱沃齐尼亚引争议

画夕
2026-07-04 16:48:41
索尔巴肯:为了保持对阵巴西不败,我们拒绝了所有友谊赛邀请

索尔巴肯:为了保持对阵巴西不败,我们拒绝了所有友谊赛邀请

懂球帝
2026-07-05 07:53:06
同学聚会后彻底破防!除了考上公务员的,其他的都回到了原生阶层

同学聚会后彻底破防!除了考上公务员的,其他的都回到了原生阶层

解说阿洎
2026-07-02 08:11:19
7月基金大调仓!弃光模块买半导体,散户别再蒙在鼓里

7月基金大调仓!弃光模块买半导体,散户别再蒙在鼓里

牛锅巴小钒
2026-07-05 05:36:15
密春雷:原配金晶陪他创业致富,他与董卿再婚后事业走下坡路

密春雷:原配金晶陪他创业致富,他与董卿再婚后事业走下坡路

三农老历
2026-07-04 16:16:30
2026-07-05 10:59:00
中冀在线
中冀在线
分享生活乐趣
177文章数 0关注度
往期回顾 全部

科技要闻

华为:逻辑折叠将大幅提升麒麟CPU核心频率

头条要闻

蒋方舟再回应"清华教授实名举报论文造假":不认可

头条要闻

蒋方舟再回应"清华教授实名举报论文造假":不认可

体育要闻

姆巴佩点走巴拉圭:巴黎三代左锋传承

娱乐要闻

王力宏成都舞台受伤 仍然坚持三小时

财经要闻

揭秘跨境“对敲”换汇黑产

汽车要闻

方程豹钛9内饰曝光 用上了长联屏设计/下半年上市

态度原创

健康
家居
房产
手机
公开课

听说少吃点能抗衰老?专家讲解!

家居要闻

传奇筑 日常诗

房产要闻

总裁空缺17个月、现金缺口超1000亿:金融局“局外人”入局万科

手机要闻

华为“韬定律”V2版本发布;三星DRAM拟涨价20%

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版