网易首页 > 网易号 > 正文 申请入驻

小米正式发布并全面开源自动驾驶模型Xiaomi OneVL

0
分享至

5月13日,@小米技术 宣布正式发布并全面开源自动驾驶模型Xiaomi OneVL:一步式潜空间语言视觉推理框架。它将VLA、世界模型和潜空间推理三大技术路线统一到同一框架中,让大模型推理“又快又准”:精度上超越显式思维链,速度上对齐“仅答案”预测,推理延迟最低仅0.24秒,为传统VLA自回归推理的5.4%,为量产车端实时部署提供了可行路径。



1、Xiaomi OneVL:让大模型推理“既快又准”

今年 3 月,小米正式发布全新小米 XLA 认知大模型架构,标志着小米辅助驾驶技术路线从“感知与模仿”迈向“理解与推理”。相比传统 VLA,XLA 强调更丰富的多模态认知输入,以及更强的场景认知、行为推理与真实世界理解能力。

在 XLA 的技术方向下,一个核心问题随之浮现:当大模型具备了推理能力,如何让这种推理既快又准?

行业过往的解决方案都有明显的缺陷:显式思维链(CoT)能显著提升轨迹规划质量,但逐 token 生成带来的额外时延,也对真实驾驶场景中的实时决策提出了更高挑战;而跳过推理直接输出答案,又会丢失关键的因果判断能力。

为了解决这些缺陷,此前行业内提出了潜空间思维链(Latent CoT)作为核心推理机制——用高维机器语言替代逐字生成的文本推理,在保持认知质量的同时大幅压缩推理时延。

而今天,小米技术研发团队在 Latent CoT 的基础上进一步探索自动驾驶大模型中的潜空间推理问题,正式推出——Xiaomi OneVL:一步式潜空间语言视觉推理框架。

作为 XLA 架构中 Latent CoT 能力的首次学术验证,Xiaomi OneVL 是首个在精度上超越显式思维链、在速度上对齐“仅答案”预测的潜在推理方案,并实现了 VLA 与世界模型的统一。



通过“语言推理 + 视觉未来预测”的双重监督,Xiaomi OneVL 将可解释性与世界模型的未来预测能力统一到 latent reasoning 中,为自动驾驶大模型探索出一条新的精度—效率平衡路径。

从这个意义上说,Xiaomi OneVL 进一步验证了 XLA 架构方向的技术潜力:真正面向现实世界的辅助驾驶,不只要看见当下,更要理解因果、预判未来,并在有限时间内完成高质量决策。

从家庭场景的具身智能到城市道路的辅助驾驶,小米正推动智能技术向“可用、可信、可扩展”的现实世界稳步迈进,为小米“人车家全生态”注入核心技术动能!



2、三项关键技术,统一 VLA、世界模型、潜空间推理三大技术路线

过去,VLA 和世界模型是自动驾驶领域两条相对独立的技术路线:VLA 专注于理解场景并输出驾驶动作,世界模型专注于预测未来场景的演变。Xiaomi OneVL 通过潜空间推理,首次将两者统一到同一套框架中。

它的核心洞察是:自动驾驶要压缩的,不只是语言推理,而是对未来世界变化的理解。 驾驶决策真正依赖的,并不只是“前方有车”“道路变窄”这样的语义描述,而是车辆运动、道路几何、障碍物演变等时空因果信息。压缩语言,丢掉的恰恰是最关键的因果结构;而压缩成“对未来视觉世界的预测”,才保留了真正决定驾驶结果的东西。

基于这一洞察,Xiaomi OneVL 提出三项关键技术。简单来说:让模型用自己的“内部语言”思考、让它学会预测未来画面、并把整个推理过程压缩到一步完成。

双模态 latent token,各司其职:视觉 latent token 编码“场景的物理因果结构”,语言 latent token 编码“驾驶意图的语义表达”,让模型“在心里想清楚”,而不是“边说边想”。

双辅助解码器,训练时用、推理时丢:视觉解码器预测未来 0.5s / 1s 的画面,让模型同时具备世界模型的未来预测能力;语言解码器重建人类可读的思维链文字,保障可解释性——两个解码器在训练中提供双重监督信号,推理时全部移除,零额外开销;

「预填充式」一步推理,快到极致:推理时丢掉两个解码器,所有 latent token 直接预填充进上下文,一次并行完成,延迟和“仅答案”模型几乎一致,比显式 CoT 最高快 2.3 倍。

3、多基准全面 SOTA,刷新潜在推理方法性能上限

在涵盖感知、推理与规划的多个主流基准上,Xiaomi OneVL 全面刷新了潜在推理方法的性能上限:

在 ROADWork、Impromptu、Alpamayo-R1 三项基准上均达到 SOTA,并在 NAVSIM 上取得优越性能,PDM-score 达到 88.84,首次在潜空间推理中超越显式 CoT(88.29);

目前唯一在所有基准上超越显式自回归 CoT 的隐式推理方法;

挂载 MLP 回归头变体,延迟进一步压到 0.24s(4.16 Hz),仅为 VLA 自回归推理的 5.4%,为量产车端实时部署提供了可行路径。

消融实验进一步验证,压缩物理世界的动态信息能带来显著的性能提升。

同时,Xiaomi OneVL 能为模型决策提供语言和视觉双维度的可解释性——既能用文字说明“为什么这样开”,也能用预测画面展示“接下来会发生什么”,将 XLA 所追求的“理解与推理”能力,真正落到了可验证、可解释的工程实践中。



为模型决策提供语言以及视觉的可解释性

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
46岁董璇在横店的家!悬浮衣帽间放C位,一面墙都是女儿的玩偶

46岁董璇在横店的家!悬浮衣帽间放C位,一面墙都是女儿的玩偶

艺能八卦局
2026-08-30 13:51:11
地产股先涨后跌,到底谁慌了?

地产股先涨后跌,到底谁慌了?

大川东山再起
2026-08-31 21:22:46
睡前吃阿托伐他汀是错的?劝告:多人服药都不对,来看标准答案

睡前吃阿托伐他汀是错的?劝告:多人服药都不对,来看标准答案

健康科普365
2026-08-29 14:30:15
妻子在闺蜜家留宿,发朋友圈炫耀:“终于体验到被填满的快乐”我平静截图点赞,隔天她公司大屏幕循环播放这张图,她彻底崩溃

妻子在闺蜜家留宿,发朋友圈炫耀:“终于体验到被填满的快乐”我平静截图点赞,隔天她公司大屏幕循环播放这张图,她彻底崩溃

新时代的两性情感
2026-08-31 13:17:25
两台成都“曙之光”驻空无人机吉隆备勤:单机可照亮1.8万平方米,将进入救援核心区

两台成都“曙之光”驻空无人机吉隆备勤:单机可照亮1.8万平方米,将进入救援核心区

红星新闻
2026-08-31 16:58:57
终于说透!2026养老金真正真相,90%退休老人都被谣言带偏了

终于说透!2026养老金真正真相,90%退休老人都被谣言带偏了

小鹿姐姐情感说
2026-09-01 00:03:01
第一次对“塑料凳”产生敬意,打开思路换个方式,妥妥生活神器

第一次对“塑料凳”产生敬意,打开思路换个方式,妥妥生活神器

抠搜侠
2026-08-31 14:24:16
华为,谁允许你这么折叠的

华为,谁允许你这么折叠的

机智猫
2026-08-31 16:40:11
俄大选进入倒计时,莫斯科称欧洲准备在投票站制造挑衅

俄大选进入倒计时,莫斯科称欧洲准备在投票站制造挑衅

桂系007
2026-09-01 08:50:40
勇士快船同在夏威夷办训练营:10月5日于檀香山交锋 小卡未来成疑

勇士快船同在夏威夷办训练营:10月5日于檀香山交锋 小卡未来成疑

罗说NBA
2026-09-01 06:55:06
天涯老帖分享:低收入人群该怎样积累财富,网友:还好还能刷到!

天涯老帖分享:低收入人群该怎样积累财富,网友:还好还能刷到!

另子维爱读史
2026-08-25 19:59:13
男篮主场遭欺负!2次违体2次走步漏判,专家怒诉:吹小胡3分犯规业余

男篮主场遭欺负!2次违体2次走步漏判,专家怒诉:吹小胡3分犯规业余

南海浪花
2026-09-01 08:28:24
伟大的2-1!郑钦文美网4连胜到手:逆转16岁新锐,赚128万奖金!

伟大的2-1!郑钦文美网4连胜到手:逆转16岁新锐,赚128万奖金!

刘姚尧的文字城堡
2026-09-01 07:37:32
以色列与希腊签署价值约30亿欧元的国防出口协议

以色列与希腊签署价值约30亿欧元的国防出口协议

财联社
2026-08-31 17:20:04
1999年,18岁的陈婷正在上课时,突然感觉一阵恶心 她知道是怀孕了

1999年,18岁的陈婷正在上课时,突然感觉一阵恶心 她知道是怀孕了

三农老历
2026-08-30 09:29:02
富含优质蛋白,是鸡蛋的 20 倍,建议中老年人,隔天吃一次,身体棒

富含优质蛋白,是鸡蛋的 20 倍,建议中老年人,隔天吃一次,身体棒

美食店主
2026-08-30 08:19:26
毛主席身高到底是多少?争议多年,九旬贴身警卫回忆量身高为众人释疑

毛主席身高到底是多少?争议多年,九旬贴身警卫回忆量身高为众人释疑

历史龙元阁
2026-08-31 08:10:51
尼泊尔总统亲自发声,唯独感谢中方快速救援,印度听了显然不开心

尼泊尔总统亲自发声,唯独感谢中方快速救援,印度听了显然不开心

军武咖
2026-08-31 20:37:16
流鼻涕后,它们开始胡乱交配?!生下有病的后代,究竟是为什么?

流鼻涕后,它们开始胡乱交配?!生下有病的后代,究竟是为什么?

万物杂志
2026-08-30 06:35:09
山姆房山店开业人山人海,网友:购物车都没了!熊猫玩偶“抢疯”…通州山姆也有新进展

山姆房山店开业人山人海,网友:购物车都没了!熊猫玩偶“抢疯”…通州山姆也有新进展

北京商报
2026-08-31 17:13:52
2026-09-01 09:32:49
中冀在线
中冀在线
分享生活乐趣
178文章数 0关注度
往期回顾 全部

科技要闻

起售不足18万!特斯拉在港澳推廉价Model 3

头条要闻

牛弹琴:特朗普赢得一次重大胜利 美国人都看傻眼了

头条要闻

牛弹琴:特朗普赢得一次重大胜利 美国人都看傻眼了

体育要闻

中国女婿用一份满分答卷,刺痛中国女排

娱乐要闻

女歌手陈粒疑被男子骚扰,本人回应

财经要闻

库克卸任,苹果下一个增长点在哪?

汽车要闻

A0级最长续航 极狐贝塔T1 550km版上市 7.68万起

态度原创

房产
家居
数码
时尚
教育

房产要闻

稳住了!三亚最新房价,刺破3.5万元/m²!

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

Mac成AI硬件宠儿:苹果提前发布2026款mini/Studio

裙子这样搭外套,能美一整个秋天

教育要闻

全国军训看广西!广西两所高中组织300名学生开展实弹射击训练

无障碍浏览 进入关怀版