网易首页 > 网易号 > 正文 申请入驻

从混沌到秩序:具身智能的数据供给革命与技能结构化实践| 2026AI Partner·北京亦庄...

0
分享至

来源:市场资讯

(来源:36氪)

机器人进工厂、进场景,真正的挑战不在模型本身,而在数据。徐良威指出,具身智能的数据不是时间、空间、任务意图紧密耦合的多模态资产。智域基石提出了五层数据编译管线模型,每一层都有明确的质量指标,唯有构建数据底座生态,让本体方、模型方、产业方各司其职,高质量物理世界的数据才能真正流通起来,支撑具身智能的规模化落地。

以下为演讲内容,经36氪整理编辑:


徐良威丨智域基石CTO

大家好,我是智域基石的联合创始人兼CTO,今天我跟大家分享的是从具身智能的数据供给革命与技能结构化实践,标题是从混沌到秩序。为什么是从混沌到秩序?具身智能的到来让大家发现原先在大语言模型、自动驾驶或者在所有过去AI的数据实践在具身智能里不够用了,今天主要讲一下智域基石在上面做了什么样的工作,主要讨论两个话题,第一个事情我们在具身智能的数据上怎么去做标准化的工业化实践。第二个如何把数据和模型本体、产业、场景结合起来,变成一个生态,而不是单纯数据的事情。

我们直接到机器人的落地,2026年我们可以看到一部分的机器人已经从小样逐渐往产业里跑了,原先我们考虑到的是怎么把实验室里的算法用视频或者现场展示的方式展现出来,这个事情已经远远不一样了,我们把机器人从实验室里搬到真实的场景里,原先只要考虑让机器人动起来、完成指定任务就可以了。现在我们要考虑的事情是如何让机器人面对不确定的、动态的、多模态整个场景数据输入,还能够进行持续稳定和物理世界的交互,这时候我们就要考虑我们怎么产生稳定化供给。

原先有一句话说的很对,模型决定机器人的能力上限,模型决定了机器人能干什么,很难决定机器人在最差的环境下能做到什么程度,因为很多事情即使是人在新的场景里都不一定能够处理的好,这个时候就需要我们考虑怎么把真实场景里的数据,这个数据可能分为本体数据,机器人感知到的环境数据,甚至是机器人的任务,机器人的日志,这些信息都要能够送到机器人训练的整个闭环里,这时候才能够把原先在小样级别变成真正在产业里能够落地的事情。

原先大家做语言模型时,大家说Scaling Law,希望有越来越多的数据才能让模型变的越来越好,本身这个事情是没有问题的,具身智能不像原先是结构化的数据,我们在多模态跟持续强相关的数据领域里发现,我们如果单纯堆数据,把大量原先混杂在互联网的数据跟机器人操作相关的数据,不管什么样的仿真数据,把这些数据全部堆在一起,能不能让模型训练出来?有这个可能性,目前的结论,我们还很难说把一些杂乱的、毫无规则的数据堆在一起就能够训练出更好的模型,我们不仅考虑数量,还要考虑质量。这个质量一方面体现在采集,另一方面体现在数据的采集、质检、预标注、人态环路的闭环再到数据后处理,再到导出,最后进到模型训练,完成模型到数据的闭环体现在整个环节里,每个环节都需要质量,如果某一环节出了差错,不是说这个模型训练不出来,而是真正的模型落到本体再进入场景,如果这个场景出问题,怎么回溯到我这个数据或者在原先的闭环里哪一部分出了问题,这是我们对于数据的要求,数量很重要,但我们要考虑质量,还要考虑质量在每一个环节里的重要性。

路线有很多,大家经常讲的VLA,以模仿学习为主,以视觉输入、语言指令再加上机器人的动作,一个机器人看到什么样的场景,我得到了指令,下一步输出什么样的动作,是一个轨迹层面的数据,以轨迹为主。另外一条路线,大家经常提起的世界模型,在world model中加一个action,最终要作用在物理世界里的,这里考虑的是我看到一个场景,我施加了一个动作,物理世界变成什么样,这时候考虑的是因果关系,这里面虽然VLA和world model有模型上的差异,需要的都是同一种底层资产,在真实世界里的结构化高质量数据,我定义了合理的或者适用于最终模型任务,通过一定手段把物理里的信息数字化,再经过结构化的过程,把它变成可以输入到模型里的东西,这时候原始数据是一样的,中间流程稍微有一些不一样,基于同一套数据底座。

数据底座是一整套把真实的场景、真实的任务、真实的成功/失败、真实的和整个环境交互全部都记录下来,从而能够输入到模型里,让模型能够在真实的世界里获得闭环。这一套数据输入有可能是机器人本体,大家看到很多数据采集工厂、数据实训厂,通过让人操控机器人获得和机器人有关的数据,直接作用于机器人不管是预训练、后训练,现在还有一些比较前沿的,让人带着第一人称视角记录人的数字化劳动,让人本身的劳动数字化到虚拟世界里,再去训练不管是VLA还是世界模型,让机器人学会人类技能,本质上都是把人类或者是机器人这样的一个本体和环境的交互,把物理的概念变成一套数字化的概念,智域基石就做了一套数据底座,不管前端是什么样的数据流入,我们都可以通过数据编译管线处理成模型可以使用的数据,最终完成数据本体,再回到场景再回到数据的闭环。

一个任务怎么把原始数据记录变成模型可以使用的数据,第一个流程,先定义好任务,先要采一个什么样的数据,先要知道机器人看到了什么,它做出什么样的动作甚至它听到了什么,还要关注前因后果,我之前的场景是什么样的,我在看到这个场景以后我做出什么样的决策,我又做出什么样的动作,如果我发生这个动作,我接下来的思考是什么,这个世界真实又会怎么变,一方面记录在真实世界里发生的所有传感器的记录,另外从任务记录,不是单纯从传感器得到的,是事前规划或者是事后推演,我通过把现场记录、任务整理搞起来,后面我们把它变成机器人、具身智能需要的一套数据资产,中间涉及到怎么采集、提取其中的关键因素,最后怎么把它沉淀到资产,也会涉及到成功/失败的处理,涉及到失败以后机器人怎么重试,重试策略是什么,重试之后导致的结果是什么,这都是从原始数据变成训练样本重要的步骤之一。

这是智域基石提出的五层数据编译管线模型,我们考虑到原始数据不是把数据采完了,把它存到硬盘里可以直接被输入到模型里训练,我们考虑到的是中间有非常多道流程,每一道流程都是有关键指标的。只有把每一步做好,才不是简单的数据存档,而是真正能够成为数据资产的东西,这一套数据资产下面可以进入到场景、模型,可以和本体结合,被真正的用起来。

第一个流程数据质检,首先是数据采集,采集后才能把真实物理环境里的模型信号变成数字信号,以数字化的形式存下来,raw data,是杂乱的、没有规则的、非结构化的数据,我并不知道好不好,也不知道能不能进入后面的处理流程里,第一步做数据质检,先看一看数据是否满足基本的数据处理要求。

数据满足后,进入数据处理管线里,下一步是数据对齐,机器人或者具身智能数据不是单纯的画面或者是简单的视频,其实是多模态和时序紧密结合的数据,完成空间、时间的对齐,完成时间、空间的结构化,不是单纯杂乱的数据,至少是被数据处理的算法和机器能够理解的数据,每处理一帧数据都可以完成横向、纵向的索引。完成以后,到了数据变成模型可用数据层次,从结构化数据里再提取出真正的语义或者因果关系部分,我们要知道数据在整个空间里怎么和环境交互的,跟意图对齐是什么样的,因果,比如之前发生了什么,场景是什么,之后又是什么,这是第三个步骤,到这个地方为止,这个数据已经能被模型用起来了,距离真正的模型泛化还很远。这时候我们要考虑我们要做好大规模数据处理,大规模数据在以前很多行业都有,现在所有行业都在讲大数据概念,但是在具身智能里不一样,因为是时间、空间、整个任务意图都紧密相连的一类数据。我们要考虑在上亿小时甚至是上千亿小时大规模数据下,我们怎么快速检索出来被某类模型需要找到的数据,这也是非常难的工作。

在前面四个步骤过去后就变的相对简单了,把数据处理好、对齐好,提取的所有内容,再找初模型需要的数据,最后给客户使用,这是最后一个环节交付。

在技术层面上完成了数据到训练之前的闭环,数据最终闭环远没有结束,必须要被模型公司用起来,而且模型公司后面的模型还要搭载在本体上,不仅完成小样,还要在产业落地,需要让数据出发经过模型部署到本体再落实到产业,最终再从产业获得反馈,回到数据这一方,这时候才是真正让数据流通起来,让智能不仅是单点而是让整个体系里把它部署起来,作为数据方是非常核心的作用,它要对接本体、对接模型,也可以对接产业。

在现在很多数据行业里,大家还是以项目制的形式做这个事情,模型没有收敛,本体百花齐放,产业也是在逐步进入到整个具身智能行业中来,智域基石做的数据,我们不仅是做一个数据项目,把体系都搭建起来,通过和本体、模型、产业对接,我们把一个项目制交付的能力变成可以被整个具身智能领域作用起来的一套数据基础措施,这时候不仅是能够交付一套数据,而是我能够支撑整个具身智能的发展,以后所有的产业、本体、模型都可以从数据方获得他想要获得的东西。

我们希望能够划分新的数据分工,让本体公司做数据,让模型公司做数据,或者让产业方做数据,都不能够支撑整个产业发展的,只有把这么一套生态构建起来,才能够让高质量物理世界的数据进入整个生态里,让具身智能行业发展起来。

我的分享就到这里,谢谢。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
《奥德赛》被误读了2800年:真正的主角根本不是奥德修斯,是他那个怂儿子

《奥德赛》被误读了2800年:真正的主角根本不是奥德修斯,是他那个怂儿子

乡野小珥
2026-08-25 12:46:15
库马杰加盟天津、琼斯赴贵州猛龙,山东男篮锁定第二外援斯图尔特,第一小外援悬而未决备战时间紧迫

库马杰加盟天津、琼斯赴贵州猛龙,山东男篮锁定第二外援斯图尔特,第一小外援悬而未决备战时间紧迫

老周观体育
2026-08-26 00:12:59
微信视频通话会有监控吗?网友在对话时使用机械声,马上收到微信警告

微信视频通话会有监控吗?网友在对话时使用机械声,马上收到微信警告

回旋镖
2026-07-09 10:02:20
别被洗脑了,在国内有100万存款是什么水平?告诉你,这才是现实

别被洗脑了,在国内有100万存款是什么水平?告诉你,这才是现实

张例喜欢软软糯糯
2026-08-24 16:54:02
年纪大了,性生活力不从心该咋办?医生:3个小建议,照着做就行

年纪大了,性生活力不从心该咋办?医生:3个小建议,照着做就行

阿兵科普
2026-08-25 17:00:48
50岁林心如突然官宣!热搜炸了:这俩,终于不装了……

50岁林心如突然官宣!热搜炸了:这俩,终于不装了……

In风尚
2026-08-25 06:04:28
CCTV5直播,中国男篮冲开门红,VS卡塔尔队,杨瀚森成最大变数

CCTV5直播,中国男篮冲开门红,VS卡塔尔队,杨瀚森成最大变数

体坛小快灵
2026-08-25 09:13:39
2026年的上海,大家都穷到什么地步了?

2026年的上海,大家都穷到什么地步了?

经济学教授V
2026-08-24 18:52:50
CBA最新消息,朱芳雨发文告别广东男篮,媒体人爆杜锋离任的导火索

CBA最新消息,朱芳雨发文告别广东男篮,媒体人爆杜锋离任的导火索

小犙拍客在北漂
2026-08-25 22:43:12
父亲去世,我拿50万给继母养老,2年后继母去世,看她遗书我怔住了

父亲去世,我拿50万给继母养老,2年后继母去世,看她遗书我怔住了

红豆讲堂
2025-06-05 11:08:26
搞笑!美媒大骂特朗普得了老年痴呆:头一次见总统向本国海军宣战

搞笑!美媒大骂特朗普得了老年痴呆:头一次见总统向本国海军宣战

犟种美食
2026-08-25 16:34:57
北约敢不敢灭掉俄罗斯?答案其实很明确。一旦北约与俄罗斯爆发大规模冲突,北约确实有能力打垮俄罗斯,但俄罗斯很可能会选择同归于尽

北约敢不敢灭掉俄罗斯?答案其实很明确。一旦北约与俄罗斯爆发大规模冲突,北约确实有能力打垮俄罗斯,但俄罗斯很可能会选择同归于尽

谈史论今1
2026-08-19 20:51:20
预售24小时订单超2万!中国造大6座SUV成功了,豪而不贵!

预售24小时订单超2万!中国造大6座SUV成功了,豪而不贵!

米粒说车唯一呀
2026-08-25 15:46:04
突然宣布关门停业!曾经由周星驰参与投资,黄晓明、沈腾都曾来此参加影片路演

突然宣布关门停业!曾经由周星驰参与投资,黄晓明、沈腾都曾来此参加影片路演

红星资本局
2026-08-25 18:11:11
前NBA球员自嘲手机像1942年古董,主播当场送苹果17 Pro Max

前NBA球员自嘲手机像1942年古董,主播当场送苹果17 Pro Max

竞技风云录
2026-08-24 10:23:19
只当过一次演员,却能住北京亿万豪宅,丈夫给她打工,儿子也争气

只当过一次演员,却能住北京亿万豪宅,丈夫给她打工,儿子也争气

铁锤妹妹是只猫
2026-08-25 00:06:13
神经科主任:只要血常规没这3个箭头,脑梗风险或不用太焦虑

神经科主任:只要血常规没这3个箭头,脑梗风险或不用太焦虑

医学科普汇
2026-08-25 23:00:08
PCB龙头沪电股份半年报出炉:营收超136亿元,净利大增逾七成,应用于1.6T交换机的产品批量出货

PCB龙头沪电股份半年报出炉:营收超136亿元,净利大增逾七成,应用于1.6T交换机的产品批量出货

每日经济新闻
2026-08-25 19:24:03
日本排球王子高桥蓝陷出轨丑闻:被曝与女友及成人女星同住酒店

日本排球王子高桥蓝陷出轨丑闻:被曝与女友及成人女星同住酒店

伟少说球
2026-08-25 18:20:32
白俄罗斯也祝乌克兰独立日快乐:卢卡申科的虚情假意,还是怕走狗烹?

白俄罗斯也祝乌克兰独立日快乐:卢卡申科的虚情假意,还是怕走狗烹?

鹰眼Defence
2026-08-25 17:29:24
2026-08-26 05:56:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4546257文章数 9354关注度
往期回顾 全部

科技要闻

机器人跑赢博尔特,身体太快,脑子还在追

头条要闻

赴韩遇害中国女生年仅25岁 原计划2天前入职新单位

头条要闻

赴韩遇害中国女生年仅25岁 原计划2天前入职新单位

体育要闻

穆里尼奥如何摆贝林修斯姆巴佩?

娱乐要闻

张韶涵成都演唱会中暑,中途吸氧

财经要闻

宇树科技最低跌破600元 5天缩水超2000亿

汽车要闻

硬派越野+华为智驾 泰钽700上市焕新价24.98万起

态度原创

艺术
家居
本地
公开课
军事航空

艺术要闻

启功手填简历曝光

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

无印良品竟是桐乡造?这座小城藏着一个刀具帝国

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

“林肯”号离开中东 留下“一地鸡毛”

无障碍浏览 进入关怀版