网易首页 > 网易号 > 正文 申请入驻

从VLA到世界模型,具身智能加速“范式转移”

0
分享至

随着具身智能的向前发展,传统的VLA技术路线正在面临越来越多的挑战。

所谓VLA模型,即视觉-语言-动作模型。它的技术逻辑可以简单描述为,将人类指令和外界多模态信息(声音、图像、视频)转化为计算机语言,继而控制机器人行为。

但在VLA模型的训练中,互联网上的静态、非结构化文本和图像数据,并不是训练所需的核心数据。物理世界数据的稀缺与复杂性,成为了制约VLA模型能力跃升的主要瓶颈。

VLA之后,具身智能接下来将往何处去?这成为了具身智能整个行业,都在试图解决的问题。

近日,蚂蚁灵波对外开源了LingBot-Depth、LingBot-VLA 、LingBot-World 以及LingBot-VA系列模型。其中 LingBot-VA 所代表的“边预测、边行动”的具身世界模型范式,正与行业近期的探索形成呼应。而四个模型的开源,则将这套能力拆成可复用的模块与接口,为开发者提供从研究验证到工程试验的基础设施,从而降低具身智能研发与集成门槛。

LingBot-VA开源,首创“自回归视频-动作范式”

蚂蚁灵波开源周中, 具身世界模型LingBot-VA成为了收官之作,其核心突破在于它改变了机器人的思考方式。

传统机器人主要基于“视觉-语言-动作”范式,其决策模式类似于“条件反射”:看到什么,就做什么。这种方式难以应对需要多步骤规划和因果推理的复杂任务。

LingBot-VA则让机器人具备“脑补”能力。

在物理执行动作之前,它会在内部模拟并推演未来几秒的世界状态变化,再根据这个推演结果来决定当前的最佳动作。这使得机器人能够像人一样“先思后行”,显著提升了在复杂、长时序任务中的可靠性和智能水平。

实现这一切的基础在于,LingBot-VA在核心范式上的创新。

LingBot-VA首创了“自回归视频-动作范式”:将大规模视频生成模型与机器人控制深度融合,模型在生成“下一步世界状态”的同时,直接推演并输出对应的动作序列。

具体而言,Mixture-of-Transformers (MoT) 架构让视频流(宽而深,负责视觉推演)与动作流(轻而快,负责运动控制)共享注意力机制又保持独立;闭环推演机制:每一步生成都纳入真实世界的实时反馈(如摄像头数据),形成“预测-执行-感知-修正”的循环,防止幻觉漂移。

最后,异步推理管线让动作预测与电机执行并行处理,大幅降低延迟。

得益于LingBot-VA的技术创新,机器人在制作早餐、插入试管、叠衣物等长时序、高精度、柔性物体操控任务中,成功率相较业界基线模型平均提升约20%;在双臂协同操作基准RoboTwin 2.0上成功率首次超过90%,在长时序终身学习基准LIBERO上达到98.5%的平均成功。

LingBot 系列开源,构建具身智能的通用基础设施

除了LingBot-VA之外,蚂蚁灵波还连续开源了LingBot-Depth(空间感知)、LingBot-VLA以及LingBot-World。这四者共同构成了一套覆盖“感知-理解-模拟-行动”的完整具身智能技术栈。

LingBot-Depth​相当于机器人的“眼睛”,通过高精度空间感知模型,解决透明、反光物体识别难题,透明物体抓取成功率从0提升至50%。

LingBot-VLA​,类似于机器人的“大脑”,让机器人理解指令并规划基础动作。基于2万小时真实机器人数据训练,LingBot-VLA在GM-100基准测试中,成功率超越基线模型Pi0.5。

可以看到,与业内主流的“仿真到现实”(Sim-to-Real)路径不同,蚂蚁灵波更笃信基于真实世界数据训练的价值。

LingBot-VLA覆盖了9种主流双臂机器人构型(包括 AgileX,Galaxea R1Pro、R1Lite 、AgiBot G1等),实现了让同一个“大脑”可以无缝迁移至不同构型的机器人,并在任务变化、环境变化时保持可用的成功率与鲁棒性。

与高精度空间感知模型LingBot-Depth配合,LingBot-VLA还能获得更高质量的深度信息表征,通过“视力”的升级,真正做到“看得更清楚、做的更明白”。

LingBot-World,则是机器人的“数字演练场”。

利用多阶段训练和并行加速,LingBot-World可以实现长达近10分钟的连续、稳定和无损视频生成,以解决视频生成中的常见挑战——“长时漂移”,也即长时间的生成通常会出现物体变形、细节崩溃、主体消失或场景结构崩溃等现象。

同时,LingBot-World在长序列一致性、实时响应性以及对行动和环境动态之间的因果关系进行建模方面表现出色。这使得它能够在数字空间中“想象”物理世界,为人工智能代理提供一个具有成本效益、高保真环境,用于试错学习。

“机器人规模化的主要阻碍不在硬件,而在’反复训练/再训练(retraining)‘,也就是每做一个新任务或换一种机器人,往往就要重新采数据、重新调参,工程成本很高。这也是机器人很难从试点走向大规模部署的原因之一。”

MarkTechPost CEOAsif Razzag表示,蚂蚁灵波发布的一系列模型很有意思,从感知到认知,全栈(full-stack)体系,每个模型互为助力,并且全部开源。

也正是基于这样的设计,全面开源的LingBot系列模型,构建了具身智能完整的通用基础设施,让开发者可以按需选用或组合。这种新的研究范式,在降低具身智能研发门槛的同时,也加速了具身智能从实验室走向产业化的进程。(文 | 科技潜线,作者 | 饶翔宇 编辑 | 钟毅)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
9月20日,人们期盼已久的2026养老金究竟涨不涨?真相终于说透了

9月20日,人们期盼已久的2026养老金究竟涨不涨?真相终于说透了

潋滟晴方DAY
2026-09-20 15:23:28
63岁李连杰自曝患病手发麻,自嘲患老年痴呆,只想休息一天

63岁李连杰自曝患病手发麻,自嘲患老年痴呆,只想休息一天

娱圈办事处
2026-09-20 22:12:38
玩火终反噬!高市早苗闯下大祸,深圳APEC陷入进退两难

玩火终反噬!高市早苗闯下大祸,深圳APEC陷入进退两难

一口娱乐
2026-09-20 08:17:01
多个媒体:切尔西老板想要C罗!但被图赫尔拒绝!

多个媒体:切尔西老板想要C罗!但被图赫尔拒绝!

历史第一人梅西
2026-09-20 19:36:28
0‑0逼平伊朗!安东尼奥表态:为全队自豪,不考虑出线之后

0‑0逼平伊朗!安东尼奥表态:为全队自豪,不考虑出线之后

凡人说体育
2026-09-20 21:59:11
硫磺熏笋事态失控!监管局确认,毒素超标百倍,货品销往全国各地

硫磺熏笋事态失控!监管局确认,毒素超标百倍,货品销往全国各地

笑饮孤鸿非
2026-09-19 20:16:27
云南帅哥罗清朗去世,年仅28岁,19岁未婚妻还在ICU,姐姐曝死因

云南帅哥罗清朗去世,年仅28岁,19岁未婚妻还在ICU,姐姐曝死因

嫹笔牂牂
2026-09-20 07:15:42
岳飞巨幅真迹出土,已达“字如其人”至高境界,秦桧看了无地自容

岳飞巨幅真迹出土,已达“字如其人”至高境界,秦桧看了无地自容

幸福娃书画苑
2025-08-03 09:40:40
美媒:中国竟然出动了战略核轰炸机!

美媒:中国竟然出动了战略核轰炸机!

果妈聊娱乐
2026-09-18 08:30:33
重演银河号事件?美军枪已上膛要强登中国船,却发现犯下致命错误

重演银河号事件?美军枪已上膛要强登中国船,却发现犯下致命错误

南宗历史
2026-09-20 03:17:37
杨某媛离职了

杨某媛离职了

大张的自留地
2026-04-17 09:56:31
于东来彻底翻车!曾经全网夸赞的良心老板,如今被自己人设困住了

于东来彻底翻车!曾经全网夸赞的良心老板,如今被自己人设困住了

梦回千年aa
2026-09-19 18:29:05
利物浦1-0伯恩茅斯 开局不败升第六 1.45亿标王制胜+英超5轮4球

利物浦1-0伯恩茅斯 开局不败升第六 1.45亿标王制胜+英超5轮4球

我爱英超
2026-09-20 23:01:33
底层打工人戾气越来越重了,昆山电子厂多名员工因口角大打出手,最终都被开除!

底层打工人戾气越来越重了,昆山电子厂多名员工因口角大打出手,最终都被开除!

黯泉
2026-09-20 17:47:01
对睡眠好的4种食物,一周吃两三次,入睡快,睡得香,精神也足了

对睡眠好的4种食物,一周吃两三次,入睡快,睡得香,精神也足了

周哥一影视
2026-09-14 14:52:12
土地到期续缴百万?商业公寓天塌了吗

土地到期续缴百万?商业公寓天塌了吗

扒财经
2026-09-18 12:28:20
理记为西贝强出头,狂轰罗永浩,爆出各种猛料~

理记为西贝强出头,狂轰罗永浩,爆出各种猛料~

葱哥说
2026-09-20 17:19:50
菲律宾急得跳脚!平陆运河刚通航,菲代表团就来了,中方正式摊牌

菲律宾急得跳脚!平陆运河刚通航,菲代表团就来了,中方正式摊牌

铜臭的历史味
2026-09-20 02:55:39
周恩来晚年:要不是毛主席拦下绝密军令,3万红军可能全军覆灭

周恩来晚年:要不是毛主席拦下绝密军令,3万红军可能全军覆灭

凡人侃史
2026-09-20 11:58:03
王艺迪苦战惜败佐藤瞳,混双携手陈俊菘强势摘金,国乒男单全部出局

王艺迪苦战惜败佐藤瞳,混双携手陈俊菘强势摘金,国乒男单全部出局

7号观察室
2026-09-20 21:25:54
2026-09-20 23:55:00
钛媒体APP incentive-icons
钛媒体APP
独立财经科技媒体
139657文章数 862615关注度
往期回顾 全部

科技要闻

谷歌承认:AI模型“黑”进3家公司

头条要闻

男子网购燃气灶防风罩一个月后妻儿中毒死亡 多方回应

头条要闻

男子网购燃气灶防风罩一个月后妻儿中毒死亡 多方回应

体育要闻

游泳2小时6金!亚运金牌榜:中国11金领跑

娱乐要闻

许嵩刚官宣结婚,冯禧黑历史就被扒

财经要闻

民企土地 被政府"无偿收储"后转手卖7亿

汽车要闻

FREELANDER神行者8开启交付 首批新车正式交付用户

态度原创

本地
旅游
手机
公开课
军事航空

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

旅游要闻

看北京|天桥绝活儿再现京韵烟火

手机要闻

iPhone18 Pro影像得172分:DXOMARK全球第二,仅比华为Pura 80 Ultra低3分

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗称已向美政府传达7项谈判条件

无障碍浏览 进入关怀版