网易首页 > 网易号 > 正文 申请入驻

从VLA到世界模型,具身智能加速“范式转移”

0
分享至


随着具身智能的向前发展,传统的VLA技术路线正在面临越来越多的挑战。

所谓VLA模型,即视觉-语言-动作模型。它的技术逻辑可以简单描述为,将人类指令和外界多模态信息(声音、图像、视频)转化为计算机语言,继而控制机器人行为。

但在VLA模型的训练中,互联网上的静态、非结构化文本和图像数据,并不是训练所需的核心数据。物理世界数据的稀缺与复杂性,成为了制约VLA模型能力跃升的主要瓶颈。

VLA之后,具身智能接下来将往何处去?这成为了具身智能整个行业,都在试图解决的问题。

近日,蚂蚁灵波对外开源了LingBot-Depth、LingBot-VLA 、LingBot-World 以及LingBot-VA系列模型。其中 LingBot-VA 所代表的“边预测、边行动”的具身世界模型范式,正与行业近期的探索形成呼应。而四个模型的开源,则将这套能力拆成可复用的模块与接口,为开发者提供从研究验证到工程试验的基础设施,从而降低具身智能研发与集成门槛。

LingBot-VA开源,首创“自回归视频-动作范式”

蚂蚁灵波开源周中, 具身世界模型LingBot-VA成为了收官之作,其核心突破在于它改变了机器人的思考方式。

传统机器人主要基于“视觉-语言-动作”范式,其决策模式类似于“条件反射”:看到什么,就做什么。这种方式难以应对需要多步骤规划和因果推理的复杂任务。

LingBot-VA则让机器人具备“脑补”能力。


在物理执行动作之前,它会在内部模拟并推演未来几秒的世界状态变化,再根据这个推演结果来决定当前的最佳动作。这使得机器人能够像人一样“先思后行”,显著提升了在复杂、长时序任务中的可靠性和智能水平。

实现这一切的基础在于,LingBot-VA在核心范式上的创新。

LingBot-VA首创了“自回归视频-动作范式”:将大规模视频生成模型与机器人控制深度融合,模型在生成“下一步世界状态”的同时,直接推演并输出对应的动作序列。

具体而言,Mixture-of-Transformers (MoT) 架构让视频流(宽而深,负责视觉推演)与动作流(轻而快,负责运动控制)共享注意力机制又保持独立;闭环推演机制:每一步生成都纳入真实世界的实时反馈(如摄像头数据),形成“预测-执行-感知-修正”的循环,防止幻觉漂移。

最后,异步推理管线让动作预测与电机执行并行处理,大幅降低延迟。

得益于LingBot-VA的技术创新,机器人在制作早餐、插入试管、叠衣物等长时序、高精度、柔性物体操控任务中,成功率相较业界基线模型平均提升约20%;在双臂协同操作基准RoboTwin 2.0上成功率首次超过90%,在长时序终身学习基准LIBERO上达到98.5%的平均成功。

LingBot 系列开源,构建具身智能的通用基础设施

除了LingBot-VA之外,蚂蚁灵波还连续开源了LingBot-Depth(空间感知)、LingBot-VLA以及LingBot-World。这四者共同构成了一套覆盖“感知-理解-模拟-行动”的完整具身智能技术栈。

LingBot-Depth​相当于机器人的“眼睛”,通过高精度空间感知模型,解决透明、反光物体识别难题,透明物体抓取成功率从0提升至50%。

LingBot-VLA​,类似于机器人的“大脑”,让机器人理解指令并规划基础动作。基于2万小时真实机器人数据训练,LingBot-VLA在GM-100基准测试中,成功率超越基线模型Pi0.5。


可以看到,与业内主流的“仿真到现实”(Sim-to-Real)路径不同,蚂蚁灵波更笃信基于真实世界数据训练的价值。

LingBot-VLA覆盖了9种主流双臂机器人构型(包括 AgileX,Galaxea R1Pro、R1Lite 、AgiBot G1等),实现了让同一个“大脑”可以无缝迁移至不同构型的机器人,并在任务变化、环境变化时保持可用的成功率与鲁棒性。

与高精度空间感知模型LingBot-Depth配合,LingBot-VLA还能获得更高质量的深度信息表征,通过“视力”的升级,真正做到“看得更清楚、做的更明白”。

LingBot-World,则是机器人的“数字演练场”。

利用多阶段训练和并行加速,LingBot-World可以实现长达近10分钟的连续、稳定和无损视频生成,以解决视频生成中的常见挑战——“长时漂移”,也即长时间的生成通常会出现物体变形、细节崩溃、主体消失或场景结构崩溃等现象。

同时,LingBot-World在长序列一致性、实时响应性以及对行动和环境动态之间的因果关系进行建模方面表现出色。这使得它能够在数字空间中“想象”物理世界,为人工智能代理提供一个具有成本效益、高保真环境,用于试错学习。

“机器人规模化的主要阻碍不在硬件,而在’反复训练/再训练(retraining)‘,也就是每做一个新任务或换一种机器人,往往就要重新采数据、重新调参,工程成本很高。这也是机器人很难从试点走向大规模部署的原因之一。”

MarkTechPost CEOAsif Razzag表示,蚂蚁灵波发布的一系列模型很有意思,从感知到认知,全栈(full-stack)体系,每个模型互为助力,并且全部开源。

也正是基于这样的设计,全面开源的LingBot系列模型,构建了具身智能完整的通用基础设施,让开发者可以按需选用或组合。这种新的研究范式,在降低具身智能研发门槛的同时,也加速了具身智能从实验室走向产业化的进程。(文 | 科技潜线,作者 | 饶翔宇 编辑 | 钟毅)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1982 年,飞行员黄植诚和马红成婚,8 年后她借出国名义在美国失联。安保人员搜查住所,卧室内查获的物件让人震惊

1982 年,飞行员黄植诚和马红成婚,8 年后她借出国名义在美国失联。安保人员搜查住所,卧室内查获的物件让人震惊

磊子讲史
2026-07-15 12:02:40
你最成功的一次装逼经历是什么?上万评论直呼:太会装了

你最成功的一次装逼经历是什么?上万评论直呼:太会装了

夜深爱杂谈
2026-07-23 20:47:32
小伙带父母花2.5万元从广州打出租车7天开3000多公里到西藏,司机最新回应:一开始以为他是去“西站”,家人担心我被骗,一路实时定位

小伙带父母花2.5万元从广州打出租车7天开3000多公里到西藏,司机最新回应:一开始以为他是去“西站”,家人担心我被骗,一路实时定位

极目新闻
2026-07-23 13:15:04
国门外被锁车机—— 一次与认知完美匹配的遭遇

国门外被锁车机—— 一次与认知完美匹配的遭遇

细雨中的呼喊
2026-07-23 21:21:11
214票对208票,美众议院要求停止对伊朗军事行动!特朗普:考虑更大规模袭击;以色列:已收到美国通报!伊朗又发生爆炸

214票对208票,美众议院要求停止对伊朗军事行动!特朗普:考虑更大规模袭击;以色列:已收到美国通报!伊朗又发生爆炸

每日经济新闻
2026-07-24 00:22:11
配享太庙!抗击渐冻症7年的蔡磊迎一大好消息,各大官媒同步发文

配享太庙!抗击渐冻症7年的蔡磊迎一大好消息,各大官媒同步发文

云舟史策
2026-07-21 11:30:22
美军12架飞机被一锅端!伊朗越打越不讲理,特朗普只剩一个问题

美军12架飞机被一锅端!伊朗越打越不讲理,特朗普只剩一个问题

攒一兜星星
2026-07-24 00:48:43
告别押一付三!上海租房迎来重大变革

告别押一付三!上海租房迎来重大变革

新浪财经
2026-07-23 21:46:17
国台办宣布,祖国势必统一,台当局闭门会议召开,赖清德铤而走险

国台办宣布,祖国势必统一,台当局闭门会议召开,赖清德铤而走险

天气观察站
2026-07-24 04:34:47
谢霆锋买的8500万豪宅,房产证里写的不是谢贤,竟然是谢家钰?

谢霆锋买的8500万豪宅,房产证里写的不是谢贤,竟然是谢家钰?

阿废冷眼观察所
2026-07-22 13:23:08
金钱至上?当打之年的荷兰国脚转战沙特,6500万镑天价合同难拒

金钱至上?当打之年的荷兰国脚转战沙特,6500万镑天价合同难拒

智道足球
2026-07-23 07:48:57
Coco直播被问为啥不生娃:不是不想生,是谢贤早就没法生了

Coco直播被问为啥不生娃:不是不想生,是谢贤早就没法生了

手工制作阿歼
2026-07-24 03:42:14
苦等多年!上海之根松江,告别地铁一根,明年将进入双地铁时代

苦等多年!上海之根松江,告别地铁一根,明年将进入双地铁时代

苗苗情感说
2026-07-24 00:59:03
体坛丑闻!中国花样游泳奥运金牌教练贺晓初落马,罪恶行为被曝光

体坛丑闻!中国花样游泳奥运金牌教练贺晓初落马,罪恶行为被曝光

傲傲讲历史
2026-07-16 20:53:56
184:57尘埃落定,日本天皇出局!高市遭反噬,2.5万人要小泉下台

184:57尘埃落定,日本天皇出局!高市遭反噬,2.5万人要小泉下台

江启
2026-07-22 15:49:03
热火误发詹姆斯回归视频,预测市场概率一夜飙升20点、赌注总额破2.45亿美元

热火误发詹姆斯回归视频,预测市场概率一夜飙升20点、赌注总额破2.45亿美元

野生运营
2026-07-24 05:07:49
原来贾乃亮没说谎!甜馨妈妈被曝已生二胎,其实有2点她一直没变

原来贾乃亮没说谎!甜馨妈妈被曝已生二胎,其实有2点她一直没变

社会日日鲜
2026-07-22 15:45:35
灾难事件中的歌颂叙事,越来越让人反感

灾难事件中的歌颂叙事,越来越让人反感

黔有虎
2026-07-10 17:13:47
瑞舒伐他汀立大功!研究发现:老人吃瑞舒伐,可改善4大血管问题

瑞舒伐他汀立大功!研究发现:老人吃瑞舒伐,可改善4大血管问题

垚垚分享健康
2026-05-28 08:52:25
黄渤2亿成本换回386万,亏损后不服联合17星对轰星爷

黄渤2亿成本换回386万,亏损后不服联合17星对轰星爷

赏心悦目的我
2026-07-22 17:35:58
2026-07-24 06:03:00
钛媒体APP incentive-icons
钛媒体APP
独立财经科技媒体
137097文章数 862476关注度
往期回顾 全部

科技要闻

中国数学家王虹、邓煜获菲尔兹奖

头条要闻

女副部王峻被处理:大搞权钱交易 泄露工作秘密

头条要闻

女副部王峻被处理:大搞权钱交易 泄露工作秘密

体育要闻

勇士24岁的MVP,也是个勒布朗?

娱乐要闻

梁朝伟汤唯19年后境遇反转

财经要闻

梁文锋当不成赛博圣人

汽车要闻

满配华为乾崑六件套 东风奕派M8限时权益价16.58万起

态度原创

手机
亲子
游戏
旅游
公开课

手机要闻

强强对决:REDMI K100系列与iQOO Neo新机,均8月见!

亲子要闻

当你没动力运动时【周六野Zoey】

《影之刃零》Wegame开启预约!版号已至即将发售

旅游要闻

云南水富藏小众小镇,原是移民安置村,凭一江风光火遍川滇!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版