网易首页 > 网易号 > 正文 申请入驻

小米正式发布并全面开源自动驾驶模型Xiaomi OneVL

0
分享至

5月13日,@小米技术 宣布正式发布并全面开源自动驾驶模型Xiaomi OneVL:一步式潜空间语言视觉推理框架。它将VLA、世界模型和潜空间推理三大技术路线统一到同一框架中,让大模型推理“又快又准”:精度上超越显式思维链,速度上对齐“仅答案”预测,推理延迟最低仅0.24秒,为传统VLA自回归推理的5.4%,为量产车端实时部署提供了可行路径。



1、Xiaomi OneVL:让大模型推理“既快又准”

今年 3 月,小米正式发布全新小米 XLA 认知大模型架构,标志着小米辅助驾驶技术路线从“感知与模仿”迈向“理解与推理”。相比传统 VLA,XLA 强调更丰富的多模态认知输入,以及更强的场景认知、行为推理与真实世界理解能力。

在 XLA 的技术方向下,一个核心问题随之浮现:当大模型具备了推理能力,如何让这种推理既快又准?

行业过往的解决方案都有明显的缺陷:显式思维链(CoT)能显著提升轨迹规划质量,但逐 token 生成带来的额外时延,也对真实驾驶场景中的实时决策提出了更高挑战;而跳过推理直接输出答案,又会丢失关键的因果判断能力。

为了解决这些缺陷,此前行业内提出了潜空间思维链(Latent CoT)作为核心推理机制——用高维机器语言替代逐字生成的文本推理,在保持认知质量的同时大幅压缩推理时延。

而今天,小米技术研发团队在 Latent CoT 的基础上进一步探索自动驾驶大模型中的潜空间推理问题,正式推出——Xiaomi OneVL:一步式潜空间语言视觉推理框架。

作为 XLA 架构中 Latent CoT 能力的首次学术验证,Xiaomi OneVL 是首个在精度上超越显式思维链、在速度上对齐“仅答案”预测的潜在推理方案,并实现了 VLA 与世界模型的统一。



通过“语言推理 + 视觉未来预测”的双重监督,Xiaomi OneVL 将可解释性与世界模型的未来预测能力统一到 latent reasoning 中,为自动驾驶大模型探索出一条新的精度—效率平衡路径。

从这个意义上说,Xiaomi OneVL 进一步验证了 XLA 架构方向的技术潜力:真正面向现实世界的辅助驾驶,不只要看见当下,更要理解因果、预判未来,并在有限时间内完成高质量决策。

从家庭场景的具身智能到城市道路的辅助驾驶,小米正推动智能技术向“可用、可信、可扩展”的现实世界稳步迈进,为小米“人车家全生态”注入核心技术动能!



2、三项关键技术,统一 VLA、世界模型、潜空间推理三大技术路线

过去,VLA 和世界模型是自动驾驶领域两条相对独立的技术路线:VLA 专注于理解场景并输出驾驶动作,世界模型专注于预测未来场景的演变。Xiaomi OneVL 通过潜空间推理,首次将两者统一到同一套框架中。

它的核心洞察是:自动驾驶要压缩的,不只是语言推理,而是对未来世界变化的理解。 驾驶决策真正依赖的,并不只是“前方有车”“道路变窄”这样的语义描述,而是车辆运动、道路几何、障碍物演变等时空因果信息。压缩语言,丢掉的恰恰是最关键的因果结构;而压缩成“对未来视觉世界的预测”,才保留了真正决定驾驶结果的东西。

基于这一洞察,Xiaomi OneVL 提出三项关键技术。简单来说:让模型用自己的“内部语言”思考、让它学会预测未来画面、并把整个推理过程压缩到一步完成。

双模态 latent token,各司其职:视觉 latent token 编码“场景的物理因果结构”,语言 latent token 编码“驾驶意图的语义表达”,让模型“在心里想清楚”,而不是“边说边想”。

双辅助解码器,训练时用、推理时丢:视觉解码器预测未来 0.5s / 1s 的画面,让模型同时具备世界模型的未来预测能力;语言解码器重建人类可读的思维链文字,保障可解释性——两个解码器在训练中提供双重监督信号,推理时全部移除,零额外开销;

「预填充式」一步推理,快到极致:推理时丢掉两个解码器,所有 latent token 直接预填充进上下文,一次并行完成,延迟和“仅答案”模型几乎一致,比显式 CoT 最高快 2.3 倍。

3、多基准全面 SOTA,刷新潜在推理方法性能上限

在涵盖感知、推理与规划的多个主流基准上,Xiaomi OneVL 全面刷新了潜在推理方法的性能上限:

在 ROADWork、Impromptu、Alpamayo-R1 三项基准上均达到 SOTA,并在 NAVSIM 上取得优越性能,PDM-score 达到 88.84,首次在潜空间推理中超越显式 CoT(88.29);

目前唯一在所有基准上超越显式自回归 CoT 的隐式推理方法;

挂载 MLP 回归头变体,延迟进一步压到 0.24s(4.16 Hz),仅为 VLA 自回归推理的 5.4%,为量产车端实时部署提供了可行路径。

消融实验进一步验证,压缩物理世界的动态信息能带来显著的性能提升。

同时,Xiaomi OneVL 能为模型决策提供语言和视觉双维度的可解释性——既能用文字说明“为什么这样开”,也能用预测画面展示“接下来会发生什么”,将 XLA 所追求的“理解与推理”能力,真正落到了可验证、可解释的工程实践中。



为模型决策提供语言以及视觉的可解释性

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
广州越秀“电鸡”被拖至百公里外的从化,约三四成车主弃车,代拉、拼单、回收生意火爆

广州越秀“电鸡”被拖至百公里外的从化,约三四成车主弃车,代拉、拼单、回收生意火爆

极目新闻
2026-05-14 12:20:34
王少杰离开东莞!无人相送,1个细节说明:他与广东队说拜拜

王少杰离开东莞!无人相送,1个细节说明:他与广东队说拜拜

体育哲人
2026-05-14 14:34:42
中国应该做好俄罗斯“崩盘”的准备

中国应该做好俄罗斯“崩盘”的准备

律法刑道
2026-05-14 10:22:13
经济学家:央视不播世界杯是危险信号 知名博主:将会引发灾难

经济学家:央视不播世界杯是危险信号 知名博主:将会引发灾难

念洲
2026-05-14 14:30:14
正国级接机,外交礼仪的顶配

正国级接机,外交礼仪的顶配

阜成门六号院
2026-05-14 18:10:50
马斯克站C位,黄仁勋皮衣换西装!17位大佬同框暴露“霸总相”

马斯克站C位,黄仁勋皮衣换西装!17位大佬同框暴露“霸总相”

商务范
2026-05-14 15:12:10
男童海底捞奔跑撞上高温红油锅,全身多处烫伤!妈妈:当时夜里11点,就我们一桌,店员应提前避让;店长:孩子猛跑过来,曾多次提醒家长

男童海底捞奔跑撞上高温红油锅,全身多处烫伤!妈妈:当时夜里11点,就我们一桌,店员应提前避让;店长:孩子猛跑过来,曾多次提醒家长

大风新闻
2026-05-14 16:29:22
肖磊:特朗普访华团队里有个人非常特殊

肖磊:特朗普访华团队里有个人非常特殊

肖磊看世界
2026-05-14 14:06:24
特朗普表示,那些孩子给我留下了特别深刻的印象

特朗普表示,那些孩子给我留下了特别深刻的印象

三叔的装备空间
2026-05-14 13:24:16
大学教师南宁火车站走错出口,遭安检员追打致10处挫伤,被认定互殴各拘留5天,要求撤销处罚法院已立案

大学教师南宁火车站走错出口,遭安检员追打致10处挫伤,被认定互殴各拘留5天,要求撤销处罚法院已立案

大风新闻
2026-05-14 14:02:21
54岁马斯克现身人民大会堂前,拿手机拍不停,“像个小孩儿”

54岁马斯克现身人民大会堂前,拿手机拍不停,“像个小孩儿”

译言
2026-05-14 11:48:24
近5万桌需退款!网红烤串店突然道歉并退钱,已有杭州人收到

近5万桌需退款!网红烤串店突然道歉并退钱,已有杭州人收到

上观新闻
2026-05-13 19:31:07
太突然!国际奥委会连招呼没打,直接  “点名”上海?

太突然!国际奥委会连招呼没打,直接 “点名”上海?

华人星光
2026-05-14 11:01:10
鲁比奥点赞人民大会堂中式装饰,A股相关概念有望迎来大涨

鲁比奥点赞人民大会堂中式装饰,A股相关概念有望迎来大涨

东方豪侠
2026-05-14 16:35:45
性,已成为职场流通的硬资源!

性,已成为职场流通的硬资源!

灯锦年
2026-05-14 00:10:06
中纪委再标红线!公职人员下班后吃饭,这5种行为将被严肃处理!

中纪委再标红线!公职人员下班后吃饭,这5种行为将被严肃处理!

细说职场
2026-05-14 16:44:30
张雪宣布停产!博主:雷军出问题你建议退款 自己出问题只补偿

张雪宣布停产!博主:雷军出问题你建议退款 自己出问题只补偿

念洲
2026-05-14 14:29:33
极度震撼!北约军演乌军无人机营4小时3次全歼瑞典军队

极度震撼!北约军演乌军无人机营4小时3次全歼瑞典军队

史政先锋
2026-05-14 16:55:54
“那家伙在空军1号前居然一动不动”!美媒注意到一名中国仪仗兵

“那家伙在空军1号前居然一动不动”!美媒注意到一名中国仪仗兵

阿龙聊军事
2026-05-14 11:02:15
aespa成员Winter吃葡萄视频引争议,网友批评"做作"

aespa成员Winter吃葡萄视频引争议,网友批评"做作"

娱圈观察员
2026-05-13 17:32:46
2026-05-14 19:15:00
中冀在线
中冀在线
分享生活乐趣
174文章数 0关注度
往期回顾 全部

科技要闻

马斯克说会谈很顺利 黄仁勋点赞 库克比耶

头条要闻

中美元首会谈细节:贝森特戴蓝色领带 鲁比奥看天花板

头条要闻

中美元首会谈细节:贝森特戴蓝色领带 鲁比奥看天花板

体育要闻

争议抽象天王山,和季后赛最稳定中锋

娱乐要闻

何九华官宣当爸!全程不提孩子妈

财经要闻

李强会见美国工商界代表

汽车要闻

双零重力座椅/AI智能体/调光天幕 启境GT7内饰发布

态度原创

艺术
时尚
房产
数码
教育

艺术要闻

这才是草书源头法帖!揭露古人不外传的笔法,王羲之也要叫“祖师爷”

T恤+低腰阔腿裤、衬衫+低腰半裙,今年夏天最时髦的搭配,谁穿谁好看!

房产要闻

海南楼市新政要出!拟调公积金贷款额度,最高可贷168万!

数码要闻

TrendForce预估:主要移动端内存2026Q2合约价环比涨幅超70%

教育要闻

“一年制没时间实习”?亨利商学院的应对体系,入学之前就能启动

无障碍浏览 进入关怀版