网易首页 > 网易号 > 正文 申请入驻

理想汽车VLA司机大模型 从动物进化到人类在成长中解决行业问题

0
分享至

2025年5月7日,理想汽车推出“理想AI Talk第二季——理想VLA司机大模型,从动物进化到人类”,理想汽车董事长兼CEO李想重点分享了对于人工智能的最新思考,VLA司机大模型的作用、训练方法和挑战,以及对于创业和个人成长的见解。

李想将AI工具分为三个层级,分别是信息工具、辅助工具和生产工具。目前,大多数人将AI作为信息工具使用,但信息工具常伴随大量无效信息、无效结果和无效结论,仅具参考价值。成为辅助工具后,AI可以提升效率,例如现在的辅助驾驶,但仍需人类参与。未来,AI发展为生产工具后,将能独立完成专业任务,显著提升效率与质量。

李想表示:“判断Agent(智能体)是否真正智能,关键在于它是否成为生产工具。只有当人工智能变成生产工具,才是其真正爆发的时刻。就像人类会雇佣司机,人工智能技术最终也会承担类似职责,成为真正的生产工具。”

VLA的实现不是突变的过程,是进化的过程

目前的L2、L2+组合驾驶辅助仍属于辅助工具阶段,而VLA(Vision-Language-Action Model,视觉语言行动模型)能够让AI真正成为司机,成为交通领域的专业生产工具。对理想汽车而言, 未来的VLA就是一个像人类司机一样工作的司机大模型”。

VLA的实现不是一个突变的过程,是进化的过程,经历了三个阶段,对应理想汽车辅助驾驶的昨天、今天和明天。第一阶段,理想汽车自2021年起自研依赖规则算法和高精地图的辅助驾驶,类似“昆虫动物智能”。第二阶段,理想汽车自2023年起研究,并于2024年正式推送的端到端+VLM(Vision Language Model,视觉语言模型)辅助驾驶,接近“哺乳动物智能”。

端到端模型在处理复杂问题时存在局限,虽可借助VLM视觉语言模型辅助,但VLM使用开源模型,使其在交通领域的能力有限。同时端到端模型也难以与人类沟通。为了解决这些问题并提升用户的智能体验,理想汽车自2024年起开展VLA研究,并在多项顶级学术会议上发表论文,夯实了理论基础。

在端到端的基础上,到第三阶段,VLA将开启“人类智能”的阶段。它能通过3D和2D视觉的组合,完整地看到物理世界,而不像VLM仅能解析2D图像。同时,VLA拥有完整的脑系统,具备语言、CoT(Chain of Thought,思维链)推理能力,既能看,也能理解并真正执行行动,符合人类的运作方式。

VLA训练过程模拟人类学习,对齐人类价值观

VLA的训练分为预训练、后训练和强化训练三个环节,类似于人类学习驾驶技能的过程。预训练相当于人类学习物理世界和交通领域的常识,通过大量高清2D和3D Vision(视觉)数据、交通相关的Language(语言)语料,以及与物理世界相关的VL(Vision-Language,视觉和语言)联合数据,训练出云端的VL基座模型,并通过蒸馏转化为在车端高效运行的端侧模型。

后训练相当于人类去驾校学习开车的过程。随着Action(动作)数据的加入——即对周围环境和自车驾驶行为的编码,VL基座变为VLA司机大模型。得益于短链条的CoT,以及Diffusion扩散模型对于他车轨迹和环境的预测,VLA具备实时性的特点,实现了在复杂交通环境中的博弈能力。

强化训练类似于人类在社会中实际开车练习,目标是让VLA司机大模型更加安全、舒适,对齐人类价值观,甚至超越人类驾驶水平。强化训练包含两部分:一是通过RLHF(Reinforcement Learning from Human Feedback,基于人类反馈的强化学习)完成安全对齐,使模型遵守交通规则,贴合中国用户的驾驶习惯;二是将纯强化学习模型放入世界模型中训练,提升舒适性,避免碰撞事故,遵守交通规则。经过预训练、后训练和强化训练后,VLA司机大模型即可部署至车端运行。

VLA司机大模型以“司机Agent(智能体)”的产品形态呈现,用户可通过自然语言与司机Agent沟通,跟人类司机怎么说,就跟司机Agent怎么说。简单通用的短指令由端侧的VLA直接处理,复杂指令则先由云端的VL基座模型解析,再交由VLA处理。

超级对齐确保AI决策安全,世界模型破解AI黑盒难题

除了提升专业能力,VLA司机大模型还需解决安全性和模型黑盒的问题。

模型能力越强,越需要职业性约束,以确保能力下限。为了保障VLA司机大模型能够实现职业司机般的安全和舒适,避免学习加塞等违规行为,理想汽车在强化训练环节投入大量资源,并于2024年底组建超过100人的超级对齐团队,相当于为司机Agent注入职业素养。

为解决模型的黑盒问题,理想汽车结合重建和生成两种路径,打造了真实、符合物理世界规律的世界模型,覆盖所有交通参与者和要素。基于世界模型的仿真能力,VLA可以在世界模型中低成本、准确地验证现实问题,提升解决问题的效率,有效应对模型黑盒带来的挑战。

判断司机Agent是否是个好司机,有三个关键标准:专业能力、职业能力和构建信任的能力。VLA司机大模型提升了专业能力,超级对齐增强了职业能力,VLA通过理解自然语言、具备记忆能力提升了构建信任的能力。

人工智能时代,扎实的基本功比走捷径重要

理想汽车实现技术快速跃迁的背后,是从研究、研发到能力表达,再到将能力变成业务价值的基本功积累。研究是关键,研究突破后,研发的效率会大幅提升,且注重价值转化,最终实现业务落地。

理想汽车坚持自研,通过技术赋能用户价值。例如,在辅助驾驶方面,由于英伟达Orin-X芯片无法直接运行语言模型,端到端+VLM的辅助驾驶方案对部分企业来说仍具挑战。理想汽车依托自有编译团队,自研底层推理引擎,使芯片可通过INT4(4比特整型)量化的方式运行VLM。同时,凭借芯片、控制器设计和自研汽车操作系统等综合能力,理想汽车实现了让双Orin-X芯片和Thor-U芯片运行同等规模的VLA司机大模型。李想表示,大型企业的基本功和能力永远无法被逾越。

得益于DeepSeek的开源,理想汽车在VLA司机大模型的语言能力研发上提速显著,节省了近9个月的时间和数亿元成本。尽管如此,理想汽车仍选择加大投入,在基座模型上投入超预期3倍的训练卡,专注打造适配多场景的自研模型。李想表示:“我们可以站在巨人的肩膀上,但它只是其中的一部分。”在受益开源的同时,理想汽车也选择开源自研的汽车操作系统——理想星环OS,回馈社会。

成长带来能量,在痛苦中保持正能量

今年7月,理想汽车将迎来成立十周年。李想表示,创业路上苦多于甜,他选择保留那些有价值的美好片段,用来激励自己保持正能量。“创业确实不容易,但是没必要苦哈哈的。苦和甜是一个硬币的正反面,取决于看哪一面。”他将企业遭遇的打击视为必须面对的挑战,也正是这些挑战,赋予了理想汽车更多的能力。也正因这份积极乐观的创业心态,理想汽车才能快速成长为千亿营收规模、百万交付量的新势力企业。

谈及如何成为更有能量的人,李想认为,关键在于关注自我,接受自身的优点和不足,并用成长替代改变——成长意味着增强能力。除此之外,李想强调亲密关系同样重要,关注他人的成长也能带来能量,家人和同事能够和他形成互补,相互支撑。“我需要家人和同事甚至超过了他们需要我,首先是我需要他们,然后才是他们需要我,我们在一起能够形成非常强的脑力和心力。”李想表示。

回顾几次创业经历,李想表示,从高中创办个人网站至今,自己的思维方式没有什么变化:遇到问题解决问题,解决别人不愿解决的难题,解决用户的痛点,不断向他人学习。不同的是,如今面临的问题更复杂、服务的用户群体更多、公司规模和组织也更庞大。“几次创业一路走来,最难时有人相助,遇坑也能迅速爬出,一帮人齐心协力变得更好,这是种幸运,也没什么可后悔的。”

面对AI的发展,李想认为,在AI面前所有的人性都应被保留,无论好坏,因为一切人性都是文化、生命、性格、能力的特质,也是人类真正的生命力所在。

从使用增程电动和5C超充技术解决电池成本高、充电难、充电慢的问题,到自研汽车操作系统攻克传统汽车操作系统性能差、开发缓慢、芯片匹配周期长等挑战,理想汽车始终以技术创新解决行业无法解决的问题。自研VLA时,理想汽车更是踏入了人工智能的无人区。当前,辅助驾驶走到了新的十字路口上,理想汽车将不断挑战成长的极限,持续为行业和用户创造价值。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
官方:英格兰后卫夸安萨因对阵墨西哥的红牌被停赛两场

官方:英格兰后卫夸安萨因对阵墨西哥的红牌被停赛两场

懂球帝
2026-07-10 00:36:12
温网半决赛赛程突变,德约辛纳之战被延后引球迷怒批

温网半决赛赛程突变,德约辛纳之战被延后引球迷怒批

篮坛第一线
2026-07-10 00:36:00
世界杯:一战成名!18岁中场诸多豪门排队砸钱签约

世界杯:一战成名!18岁中场诸多豪门排队砸钱签约

消保宣教
2026-07-09 10:32:13
夺冠热门轰然倒下,一短板成致命伤,球迷:再一再二无再三,上限4强

夺冠热门轰然倒下,一短板成致命伤,球迷:再一再二无再三,上限4强

我就是一个说球的
2026-07-09 14:59:47
知名脱口秀演员唐香玉拒绝道歉后遭强制执行!曾实名抵制性骚扰

知名脱口秀演员唐香玉拒绝道歉后遭强制执行!曾实名抵制性骚扰

都市快报橙柿互动
2026-07-08 08:48:44
国际足联正式回应法国队的申诉!

国际足联正式回应法国队的申诉!

体育哲人
2026-07-09 16:50:15
德不配位必有灾殃!央视表态仅6天,韩红再迎"噩耗",孙浩曝内幕

德不配位必有灾殃!央视表态仅6天,韩红再迎"噩耗",孙浩曝内幕

老范谈史
2026-07-09 15:08:22
非必要不做CT!最新研究:一次CT检查辐射,可能埋下多年后的隐患

非必要不做CT!最新研究:一次CT检查辐射,可能埋下多年后的隐患

岐黄传人孙大夫
2026-07-09 22:40:03
香港演员在波兰失联多日!好友网上求助

香港演员在波兰失联多日!好友网上求助

韩小娱
2026-07-09 18:13:50
从月销过万到跌入谷底 乐道L90失败 全新L80重蹈覆辙

从月销过万到跌入谷底 乐道L90失败 全新L80重蹈覆辙

中车网评
2026-07-09 16:42:19
中央气象台:台风“巴威”预计11日晚在福建福清到浙江温岭一带沿海登陆,13日后移动路径存在较大不确定性

中央气象台:台风“巴威”预计11日晚在福建福清到浙江温岭一带沿海登陆,13日后移动路径存在较大不确定性

红星新闻
2026-07-09 16:15:56
北京大秀,赵子琪小女儿晕倒、大女儿一脸冷漠,李小璐翻baby白眼

北京大秀,赵子琪小女儿晕倒、大女儿一脸冷漠,李小璐翻baby白眼

金风说
2026-07-09 12:05:11
争议?阿根廷主裁2次叫停姆巴佩罚点球 基恩:不公!让球员等3分钟

争议?阿根廷主裁2次叫停姆巴佩罚点球 基恩:不公!让球员等3分钟

风过乡
2026-07-10 05:20:31
唐嫣:我和罗晋在一起半年,他提了6次分手。主持人:那是怎么和好的?唐嫣:他每次都说5个字!

唐嫣:我和罗晋在一起半年,他提了6次分手。主持人:那是怎么和好的?唐嫣:他每次都说5个字!

LULU生活家
2026-07-09 21:18:17
发现一个现象:大多数家庭,只要儿子儿媳不买房,长期和父母同住一处,渐渐的,小两口和父母的关系,就变得像“仇人”一般

发现一个现象:大多数家庭,只要儿子儿媳不买房,长期和父母同住一处,渐渐的,小两口和父母的关系,就变得像“仇人”一般

大爱三湘
2026-07-09 23:05:32
大众汽车拟启动其最大规模重组:裁员10万人并关闭四座德国工厂

大众汽车拟启动其最大规模重组:裁员10万人并关闭四座德国工厂

IT之家
2026-07-09 16:26:29
伊朗使用新型导弹打击多个美军目标

伊朗使用新型导弹打击多个美军目标

财联社
2026-07-09 20:15:06
广西一动物园被淹,上百只动物被冲走,员工冒险锁死猛兽区,3只狮子溺亡,负责人:不能让猛兽出来,会伤人

广西一动物园被淹,上百只动物被冲走,员工冒险锁死猛兽区,3只狮子溺亡,负责人:不能让猛兽出来,会伤人

山西晚报
2026-07-09 09:54:45
湖人队名宿费舍尔:有球迷对勒布朗·詹姆斯离队是“庆祝”心态

湖人队名宿费舍尔:有球迷对勒布朗·詹姆斯离队是“庆祝”心态

好火子
2026-07-10 06:27:45
晋江鞋厂火灾,目击者发声

晋江鞋厂火灾,目击者发声

中国新闻周刊
2026-07-09 20:15:08
2026-07-10 08:23:00
晨车说
晨车说
寻购车族所求、供驾车族所需、享乘车族所乐
749文章数 1关注度
往期回顾 全部

汽车要闻

悦己更悦人 阿维塔07L加长了更加上了豪华

头条要闻

特朗普松口 称将授权乌克兰自行生产"爱国者"防空系统

头条要闻

特朗普松口 称将授权乌克兰自行生产"爱国者"防空系统

体育要闻

信哈兰德吃小孩,还是信非洲足球会魔法?

娱乐要闻

陈翔发文“苍天饶过谁”登热搜,旧事再引关注

财经要闻

中国房地产十年

科技要闻

Meta发布Muse spark 1.1,跑分接近Opus4.8

态度原创

手机
教育
时尚
家居
本地

手机要闻

10999元起 华为Pura X Max销量突破51万台:全球首款大阔折手机

教育要闻

我真的很讨厌这句话!!!非常非常讨厌!!!

廉价舞厅里,老年人的爱与欲

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

重庆人有自己的避暑桃花源 | 夏天就去「酉」风的地方!

无障碍浏览 进入关怀版