网易首页 > 网易号 > 正文 申请入驻

可编程的世界模型让具身世界生产规模化!同济大学空间智能团队发布最新成果

0
分享至


多任务、多场景、多视角,具身视频生成走向规模化。实验室里,机械臂摇匀试剂;工厂里,机械狗巡检、转向、爬上台阶;市场里,人形机器人搬货上架;手术台上,灵巧手穿线打结......画面越丰富,越照出一个现实:机器人要走进千行百业,缺的不是模型,而是覆盖不同物体、不同空间、不同视角的交互数据。靠实机一遍遍采集,成本高、周期长,换个场景就得重来。更关键的是,数据生产必须可控:物体放在哪里、机械臂怎么动、相机沿哪条路径看,都该像参数一样随时可调。谁能把这件事做成,谁就握住了具身智能规模化的入口。

同济大学空间智能团队联合考拉悠然推出的悠然无界系列代码驱动具身世界模型框架BWM-Forge,给出的正是这套可规模化的解法:它把机器人本体、场景物体、动作过程与相机视角写进一段可执行的三维场景程序。先用代码搭出世界骨架,机器人怎么动、物体在哪里、镜头从哪儿看,一目了然;再交给视频生成模型补上材质、光影与环境细节。换本体、换场景、换机位,都不必从零重来。对数据生产而言,成本结构从“每次重拍”变成“一次搭建、多次复用”。


BWM-Forge——以可执行场景程序连接机器人任务与高保真视频

把世界写进代码,每次修改都有入口

记者获悉,具身世界模型框架BWM-Forge 把物体、运动、相机都写成可改参数,为具身生成搭起可操作的世界底座。

一句任务描述、一份机器人资产,就能启动生产。系统提供空间语义驱动、运动先验驱动、真实示范驱动三种范式,由Agent 搭建场景、导入本体、编排动作与镜头,先产出检查结构与运动的代理视频;再调用视频生成模型,结合代理视频、参考图像与提示词,补齐材质、光影和环境细节。代码里的场景与动作,就是高保真画面的共同参照。

修改从此有了明确入口:调物体,改场景参数;换动作,编辑运动过程;切视角,重排相机。已有程序还能直接复用到新机位、新外观,一次构建撑起一批生成需求——对按条计算成本的数据生产来说,这是最实在的降本。

跑分给出了最直观的答案。在15 项任务评估中,BWM-Forge 的画面表现与任务指令对齐能力保持稳定:VBench-Long 主体一致性 0.9721,高于 LingBot-World Base Cam 的 0.9480;背景一致性 0.9722,对比方法为 0.9578;RoboJudge-9B 指令对齐均分 3.33,对比方法 2.73。主体不漂移、场景不跳变、目标动作能完整呈现——对下游训练来说,这三项恰恰决定了这批数据能不能直接进训练集。

多任务拓本体覆盖,多场景丰视觉表达,多视角补观察维度。三条路径指向同一条主线:把场景、运动与镜头留成可编辑、可复用的程序,再交给生成模型补足视觉细节。每一次构建都不再是一次性投入,而是可累积的资产。

多任务、多场景,一次构建能复用多少次?

本体可以换、场景可以换、机位也可以换。BWM-Forge 把这些变量收进可编辑的场景程序,让“谁来做、在哪做、从哪儿看”都有明确开关。对需要批量产出训练数据的团队来说,同一份投入可以摊到更多任务上。

从“多任务”领域来看,从机械臂到人形机器人,一条产线可覆盖更多本体,从桌面精细操作到房间级全身移动与连续交互,多样本体与任务被收进同一条可编程产线,具身数据的覆盖面由此打开。记者获悉,支撑这些演示的,是同一套代码驱动工作流。接入新的机器人资产、定义任务目标,再结合可用的运动信息继续构建与调整,就能延伸到新的本体与任务。

从“多场景”领域来看,一段动作,换个环境就是一条新数据。同一个箱子,人形机器人搬了一次,环境却换了三回:市场里是摊位与遮阳篷,工业仓库里是挑高大堂与远处堆货,垂直农场里则是成排植物与配套设备。动作没变,视觉语境全变了。三个版本共用代理视频与参考帧,机器人、箱子、货架、动作顺序与相机保持一致,只通过提示词改变环境材质、光照和背景细节,一次动作构建就能产出多条差异化数据,边际成本被明显压低。


一段代理视频,三种场景外观——市场、工业仓库与垂直农场

从“多视角”维度看,换个机位,就多一份观察数据。四足机器人在工厂里行走、转向、爬楼梯。原始机位交代它与设备、楼梯的位置;跟随镜头贴着身体记录转向与行进;近似第一人称视角,把前方通道与台阶推到眼前。同一段动作,三种信息量。任务只跑一条时间线,观察却能开出多个入口。


原始、跟随与近似第一人称视角,共享场景和运动时间线

四个Agent形成产线,经验也能沉淀复用

可编程世界的背后,是一条覆盖构建、审查、渲染与反馈的Agent 流水线。BWM-Forge用Harness系统调度四类Agent:预处理Agent核对机器人资产与运动数据、提取视觉信息;构建Agent编写并执行场景与动画脚本,编排运动与相机轨迹;审查Agent对照画面、轨迹与执行记录排查问题并局部返工;渲染Agent调用视频模型产出高保真结果并组织评估迭代。

自动评估盯住清晰度、颜色稳定性、运动平滑度与动作保真度,视觉语言模型再审真实感、物理与时间连贯性、任务语义一致性,二者与用户反馈共同指向下一轮修改,质量靠闭环而非碰运气。构建生成中,用户可随时查看阶段结果,用自然语言指出物体布局、机器人动作、相机视角或画面细节问题;系统据此调整场景程序、运动参数或生成提示,并交回确认。人始终在回路里,迭代不必反复重跑,改动落在代码中,下一轮仍可复用。

一次任务收尾,就是下一次构建的起点。系统将建模与渲染记录提炼为可检索规则,沉淀进经验库。在工作台、实验室、厨房等跨场景搬运案例中,避障间隙、动作阶段、容器放置、相机取景等经验,可结合新的物体尺寸与场景条件再次调用。场景程序留住可编辑任务,经验库攒下可调用方法,越用越省。

面向具身智能,BWM-Forge为机器人视觉数据规模化扩充提供新路径。下一步,同济大学与考拉悠然将继续扩大任务覆盖、完善自动审查与生成流程,并进一步验证生成视频对下游机器人学习的实际增益。

原标题:《可编程的世界模型让具身世界生产规模化!同济大学空间智能团队发布最新成果》

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
霍启刚又幸福了!45岁郭晶晶官宣喜讯,让霍震霆和整个贵妇圈沉默

霍启刚又幸福了!45岁郭晶晶官宣喜讯,让霍震霆和整个贵妇圈沉默

草莓解说体育
2026-11-21 05:01:31
读了马斯克我发现:穷人变富最快的方式就3个字,很多人都忽略了

读了马斯克我发现:穷人变富最快的方式就3个字,很多人都忽略了

阿胖读书
2025-06-29 23:00:33
来了一趟中国,菲总统小马科斯态度变了,要加强合作管控分歧

来了一趟中国,菲总统小马科斯态度变了,要加强合作管控分歧

光电科技君
2026-11-20 23:40:19
三十年前,瑞典的人均GDP高达3.2万美元,甚至比美国还高出18%,街头安全到可以夜不闭户;如今到处都是难民,本地人都不敢出门

三十年前,瑞典的人均GDP高达3.2万美元,甚至比美国还高出18%,街头安全到可以夜不闭户;如今到处都是难民,本地人都不敢出门

回京历史梦
2026-11-21 09:31:06
GTA 6手感像大镖客2?先改这个移动设置

GTA 6手感像大镖客2?先改这个移动设置

渡川5
2026-11-20 03:26:06
女主术后不能同房,找女人帮老公泄火,保姆半推半就:一次五百!

女主术后不能同房,找女人帮老公泄火,保姆半推半就:一次五百!

第7情感
2025-07-31 11:41:37
原来有些东西换个名字搜就能便宜一半!网友:亲戚来我家都要问!

原来有些东西换个名字搜就能便宜一半!网友:亲戚来我家都要问!

另子维爱读史
2026-11-20 21:57:06
火箭124-133不敌掘金 球员评价:3人优秀,2人及格,5人低迷

火箭124-133不敌掘金 球员评价:3人优秀,2人及格,5人低迷

篮球资讯达人
2026-11-21 13:47:30
1-3!C罗破门又错失点球,利雅得胜利强强对话被逆转,6连胜终结

1-3!C罗破门又错失点球,利雅得胜利强强对话被逆转,6连胜终结

我的护球最独特
2026-11-21 03:30:16
你也配啊?

你也配啊?

求实处
2026-11-20 23:39:32
金饰克价继续下跌 老凤祥单日跌34元

金饰克价继续下跌 老凤祥单日跌34元

财联社
2026-11-21 10:35:02
中国又被欧洲重新定义?英媒忍不住提醒了,欧洲真正敌人不是中国

中国又被欧洲重新定义?英媒忍不住提醒了,欧洲真正敌人不是中国

莹莹的历史说
2026-11-21 13:53:54
沃特森谈哈登51分:能够亲眼见证这一切 真的太不可思议了

沃特森谈哈登51分:能够亲眼见证这一切 真的太不可思议了

北青网-北京青年报
2026-11-21 13:47:01
美媒曝光黄仁勋被董事会罢免的主要原因

美媒曝光黄仁勋被董事会罢免的主要原因

新浪财经
2026-11-21 10:11:55
离千球只差14球!曝C罗将续约利雅得胜利1年:年薪2亿 或父子同台

离千球只差14球!曝C罗将续约利雅得胜利1年:年薪2亿 或父子同台

风过乡
2026-11-21 08:40:22
警惕!MCN杀猪盘套路:专挑女大学生下手,完不成直播任务就逼陪客抵债

警惕!MCN杀猪盘套路:专挑女大学生下手,完不成直播任务就逼陪客抵债

拍案社会
2026-11-15 10:08:36
谢霆锋这算官宣吗?满屏都是霍汶希

谢霆锋这算官宣吗?满屏都是霍汶希

喜欢历史的阿繁
2026-11-19 08:59:07
弟弟2.8秒绝杀,哥哥赛后说这是最矛盾的一场比赛

弟弟2.8秒绝杀,哥哥赛后说这是最矛盾的一场比赛

林间小温柔
2026-11-21 14:47:23
美国下月举办G20峰会期间,是否会举行第二次中俄美三国元首会晤,外交部回应

美国下月举办G20峰会期间,是否会举行第二次中俄美三国元首会晤,外交部回应

政知新媒体
2026-11-20 15:25:01
美国批评乌克兰袭击俄罗斯大桥事件,德国防长尖锐反驳:美国是“相当愚蠢”!

美国批评乌克兰袭击俄罗斯大桥事件,德国防长尖锐反驳:美国是“相当愚蠢”!

忧郁天空
2026-11-18 18:32:55
2026-11-21 15:24:49
上观新闻 incentive-icons
上观新闻
站上海,观天下
556545文章数 765326关注度
往期回顾 全部

科技要闻

老黄想回来?英伟达董事会:没门

头条要闻

历时14小时特朗普返回美国 刚下飞机就发布"重大预告"

头条要闻

历时14小时特朗普返回美国 刚下飞机就发布"重大预告"

体育要闻

脚步未停!西班牙摩托车手赤脚徒步入境中国

娱乐要闻

官媒发文 官宣赵丽颖新身份,进步很大

财经要闻

最大回撤超37%,黄金崩盘了吗?

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

房产
旅游
家居
时尚
军事航空

房产要闻

黄埔商业规划曝光!科学城能级跃升,核心入场券已锁定

旅游要闻

青岛冬日赏鸥地图|沿着海岸线,赴一场海鸥之约

家居要闻

2026建博会(广州) 公装联探展交流活动

秋天衣服别总穿纯色,试试这几件条纹单品,简单时尚又减龄

军事要闻

沙特首都第一高楼遭袭:炮弹从天而降

无障碍浏览 进入关怀版