网易首页 > 网易号 > 正文 申请入驻

小米正式发布并全面开源自动驾驶模型Xiaomi OneVL

0
分享至

5月13日,@小米技术 宣布正式发布并全面开源自动驾驶模型Xiaomi OneVL:一步式潜空间语言视觉推理框架。它将VLA、世界模型和潜空间推理三大技术路线统一到同一框架中,让大模型推理“又快又准”:精度上超越显式思维链,速度上对齐“仅答案”预测,推理延迟最低仅0.24秒,为传统VLA自回归推理的5.4%,为量产车端实时部署提供了可行路径。



1、Xiaomi OneVL:让大模型推理“既快又准”

今年 3 月,小米正式发布全新小米 XLA 认知大模型架构,标志着小米辅助驾驶技术路线从“感知与模仿”迈向“理解与推理”。相比传统 VLA,XLA 强调更丰富的多模态认知输入,以及更强的场景认知、行为推理与真实世界理解能力。

在 XLA 的技术方向下,一个核心问题随之浮现:当大模型具备了推理能力,如何让这种推理既快又准?

行业过往的解决方案都有明显的缺陷:显式思维链(CoT)能显著提升轨迹规划质量,但逐 token 生成带来的额外时延,也对真实驾驶场景中的实时决策提出了更高挑战;而跳过推理直接输出答案,又会丢失关键的因果判断能力。

为了解决这些缺陷,此前行业内提出了潜空间思维链(Latent CoT)作为核心推理机制——用高维机器语言替代逐字生成的文本推理,在保持认知质量的同时大幅压缩推理时延。

而今天,小米技术研发团队在 Latent CoT 的基础上进一步探索自动驾驶大模型中的潜空间推理问题,正式推出——Xiaomi OneVL:一步式潜空间语言视觉推理框架。

作为 XLA 架构中 Latent CoT 能力的首次学术验证,Xiaomi OneVL 是首个在精度上超越显式思维链、在速度上对齐“仅答案”预测的潜在推理方案,并实现了 VLA 与世界模型的统一。



通过“语言推理 + 视觉未来预测”的双重监督,Xiaomi OneVL 将可解释性与世界模型的未来预测能力统一到 latent reasoning 中,为自动驾驶大模型探索出一条新的精度—效率平衡路径。

从这个意义上说,Xiaomi OneVL 进一步验证了 XLA 架构方向的技术潜力:真正面向现实世界的辅助驾驶,不只要看见当下,更要理解因果、预判未来,并在有限时间内完成高质量决策。

从家庭场景的具身智能到城市道路的辅助驾驶,小米正推动智能技术向“可用、可信、可扩展”的现实世界稳步迈进,为小米“人车家全生态”注入核心技术动能!



2、三项关键技术,统一 VLA、世界模型、潜空间推理三大技术路线

过去,VLA 和世界模型是自动驾驶领域两条相对独立的技术路线:VLA 专注于理解场景并输出驾驶动作,世界模型专注于预测未来场景的演变。Xiaomi OneVL 通过潜空间推理,首次将两者统一到同一套框架中。

它的核心洞察是:自动驾驶要压缩的,不只是语言推理,而是对未来世界变化的理解。 驾驶决策真正依赖的,并不只是“前方有车”“道路变窄”这样的语义描述,而是车辆运动、道路几何、障碍物演变等时空因果信息。压缩语言,丢掉的恰恰是最关键的因果结构;而压缩成“对未来视觉世界的预测”,才保留了真正决定驾驶结果的东西。

基于这一洞察,Xiaomi OneVL 提出三项关键技术。简单来说:让模型用自己的“内部语言”思考、让它学会预测未来画面、并把整个推理过程压缩到一步完成。

双模态 latent token,各司其职:视觉 latent token 编码“场景的物理因果结构”,语言 latent token 编码“驾驶意图的语义表达”,让模型“在心里想清楚”,而不是“边说边想”。

双辅助解码器,训练时用、推理时丢:视觉解码器预测未来 0.5s / 1s 的画面,让模型同时具备世界模型的未来预测能力;语言解码器重建人类可读的思维链文字,保障可解释性——两个解码器在训练中提供双重监督信号,推理时全部移除,零额外开销;

「预填充式」一步推理,快到极致:推理时丢掉两个解码器,所有 latent token 直接预填充进上下文,一次并行完成,延迟和“仅答案”模型几乎一致,比显式 CoT 最高快 2.3 倍。

3、多基准全面 SOTA,刷新潜在推理方法性能上限

在涵盖感知、推理与规划的多个主流基准上,Xiaomi OneVL 全面刷新了潜在推理方法的性能上限:

在 ROADWork、Impromptu、Alpamayo-R1 三项基准上均达到 SOTA,并在 NAVSIM 上取得优越性能,PDM-score 达到 88.84,首次在潜空间推理中超越显式 CoT(88.29);

目前唯一在所有基准上超越显式自回归 CoT 的隐式推理方法;

挂载 MLP 回归头变体,延迟进一步压到 0.24s(4.16 Hz),仅为 VLA 自回归推理的 5.4%,为量产车端实时部署提供了可行路径。

消融实验进一步验证,压缩物理世界的动态信息能带来显著的性能提升。

同时,Xiaomi OneVL 能为模型决策提供语言和视觉双维度的可解释性——既能用文字说明“为什么这样开”,也能用预测画面展示“接下来会发生什么”,将 XLA 所追求的“理解与推理”能力,真正落到了可验证、可解释的工程实践中。



为模型决策提供语言以及视觉的可解释性

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
人不会平白无故患带状疱疹!医生强调:得带状疱疹多半有4个共性

人不会平白无故患带状疱疹!医生强调:得带状疱疹多半有4个共性

芹姐说生活
2026-08-05 22:09:05
马云太“鸡贼”了!多年前恒大夺冠庆功宴照片再登热搜:举杯瞬间,马云留意许家印的动作,观察对方是否举杯饮酒

马云太“鸡贼”了!多年前恒大夺冠庆功宴照片再登热搜:举杯瞬间,马云留意许家印的动作,观察对方是否举杯饮酒

火山詩话
2026-08-23 07:03:56
侯梦莎现状:定居杭州,靠自媒体过得很潇洒,和88岁姥姥很亲密

侯梦莎现状:定居杭州,靠自媒体过得很潇洒,和88岁姥姥很亲密

凡知
2026-08-30 10:28:12
王俊杰赛后激动落泪:特别开心能赢下胜利 杨瀚森NBA!超级高水平

王俊杰赛后激动落泪:特别开心能赢下胜利 杨瀚森NBA!超级高水平

狼叔评论
2026-08-31 22:36:04
又有“小仙女”横空出世!上海一女生穿过带污渍内裤退货,店家追问,反而怒斥商家“你不恶心吗”

又有“小仙女”横空出世!上海一女生穿过带污渍内裤退货,店家追问,反而怒斥商家“你不恶心吗”

火山詩话
2026-08-31 09:09:15
老人因“鱼头对自己”怒斥小辈,被怼到哑口无言:没生在紫禁城,就别那么多穷规矩!

老人因“鱼头对自己”怒斥小辈,被怼到哑口无言:没生在紫禁城,就别那么多穷规矩!

妍妍教育日记
2026-08-16 10:05:09
星宇应届生纠纷续!人社局认定无违法,学生海外投诉实现逆风翻盘

星宇应届生纠纷续!人社局认定无违法,学生海外投诉实现逆风翻盘

社会日日鲜
2026-08-28 16:03:10
孙宇晨手撕景甜的真实原因,找到了

孙宇晨手撕景甜的真实原因,找到了

金石随笔
2026-08-31 07:22:40
这很科学:89%的人幻想过同时和多人发生性行为,算精神出轨吗?

这很科学:89%的人幻想过同时和多人发生性行为,算精神出轨吗?

宇宙时空
2026-05-26 18:20:10
赵心童的竞技水平远不如巅峰丁俊晖!顶级水平的下滑正拉低观赏性

赵心童的竞技水平远不如巅峰丁俊晖!顶级水平的下滑正拉低观赏性

世界体坛观察家
2026-08-31 14:55:23
高铁前排乘客一直说话,陈震被气得发网上吐槽

高铁前排乘客一直说话,陈震被气得发网上吐槽

映射生活的身影
2026-08-30 16:46:32
怪不得早年资源逆天,景甜背后神秘大佬曝光,常年低调却身价不菲

怪不得早年资源逆天,景甜背后神秘大佬曝光,常年低调却身价不菲

少女的烦恼
2026-08-30 15:05:25
欧洲博物馆频频失窃,凭什么还无动于衷?

欧洲博物馆频频失窃,凭什么还无动于衷?

烽火瞭望者
2026-08-31 04:28:29
19岁女孩被亲生父亲一周强奸4次,报警后母亲竟让她去撤案

19岁女孩被亲生父亲一周强奸4次,报警后母亲竟让她去撤案

胖胖侃咖
2025-05-28 08:00:16
消防员也开始劳务派遣了?拿最低工资的人,能替你玩命吗

消防员也开始劳务派遣了?拿最低工资的人,能替你玩命吗

六子吃凉粉
2026-08-30 18:44:58
上任以来,特朗普最大贡献就是:亲手促成了中国人对美国的祛魅

上任以来,特朗普最大贡献就是:亲手促成了中国人对美国的祛魅

军机Nova
2026-08-22 00:20:07
高圆圆5年瞿颖11年,都栽在同一个男人手里,如今他却活成这样

高圆圆5年瞿颖11年,都栽在同一个男人手里,如今他却活成这样

凛若秋霜
2026-08-30 05:37:44
俄集团军指挥层全到场后,13枚导弹如期砸落,司令参谋长惨遭团灭

俄集团军指挥层全到场后,13枚导弹如期砸落,司令参谋长惨遭团灭

云上乌托邦
2026-08-31 22:07:31
电影《肖申克的救赎》内地票房破1000万元

电影《肖申克的救赎》内地票房破1000万元

界面新闻
2026-08-30 12:21:24
杜家毫最新署名文章

杜家毫最新署名文章

政知新媒体
2026-08-31 10:22:59
2026-09-01 04:40:49
中冀在线
中冀在线
分享生活乐趣
178文章数 0关注度
往期回顾 全部

科技要闻

起售不足18万!特斯拉在港澳推廉价Model 3

头条要闻

60米高空直击吉隆口岸 这就是泥石流曾吞噬的高度

头条要闻

60米高空直击吉隆口岸 这就是泥石流曾吞噬的高度

体育要闻

中国女婿用一份满分答卷,刺痛中国女排

娱乐要闻

女歌手陈粒疑被男子骚扰,本人回应

财经要闻

沃什美联储百日新政剧变:没有给答案

汽车要闻

A0级最长续航 极狐贝塔T1 550km版上市 7.68万起

态度原创

教育
时尚
亲子
家居
房产

教育要闻

校规成“笑规”,上厕所都能成为严重违纪?

边开火,边关店:顶奢LV,店又没了?

亲子要闻

忍不了!美女吐槽备孕:现在男人的精子质量真的太差!

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

稳住了!三亚最新房价,刺破3.5万元/m²!

无障碍浏览 进入关怀版