网易首页 > 网易号 > 正文 申请入驻

9.9万起,零次方推出“全模态”数据方案

0
分享至

在具身智能研发中,往往普遍存在以下数据问题:数据模态缺失、数据采集流程繁琐、任务数据管理繁杂、模型训练推理部署门槛高等难题。诸多瓶颈成为具身智能模型从实验室走向规模化应用的“拦路虎”。零次方深耕具身智能领域,以自身模型开发经历为基础,深悉行业痛点,推出“全模态”具身数据全链路解决方案,突破数据瓶颈,加速模型训练开发,涵盖:“全模态”数据采集设备、数据采集与管理平台、模型训练与模型推理工具链,旨在彻底解决上述痛点问题。

面向未来3-5年具身数据需求设计

技术路线上:当前具身智能模型的发展仍处于发展期,各研究团队的技术路线逐渐向更丰富的模态探索:

  • 视觉-关节融合方案(如ACT、Diffusion Policy、DP3等):通过联合嵌入视觉信息与机器人本体感知,利用本体数据补偿视觉观测歧义性,提升动作泛化能力,但因缺乏力学反馈,在物理交互密集型任务中适应性不足。

  • 语义-视觉-关节融合方案(如Pi0、GROOT等):引入语义信息(如语言指令/场景描述)增强环境与长序列任务的理解,结合视觉与关节状态实现多模态决策,提升复杂任务泛化性。

  • 视觉-关节-力联合建模(如RDP等)引入力/触觉反馈构建物理表征,提升泛精密操作的鲁棒性;

  • 更为齐全的模态架构正成为新趋势,通过跨模态对齐实现环境-物理-语义的协同推理。

在此背景下,零次方的全模态数据架构具备双重核心优势:

1.维度兼容性:全模态数据高维数据可自然降维生成任意子模态数据集(如剥离力触觉获得纯视觉-关节数据),兼容现存所有算法范式的训练需求;

2.价值持续性:预设传感器冗余通道,集成工具标注对齐多模态数据流,为正在演进的VLA、跨模态对齐、物理因果推理、世界模型等等未来3-5年可能涌现的具身模型提供燃料。

这种前瞻性设计能兼容当下技术生态、支撑长期算法进化的“高维数据基座”。此外,零次方的“全模态”数采人形机器人 ZERITH-H1,完美兼顾零次方的全模态数据架构设计,实现全模态数据采集与落地。

“全模态”数采人形机器人 ZERITH-H1

“拟人”身体架构,“超人”活动范围:ZERITH-H1的上肢结构、自由度设计全部参考人类的身体,并在此基础上大幅增加关节的活动范围,使得其具备超越成年男性的灵活操作空间。

ZERITH-H1 基础参数介绍

高维度“全模态”传感器设计:为应对具身智能模型训练普遍存在的“数据模态缺失”问题,零次方机器人在Zerith-H1设计阶段即整合了各种模态的传感器,可实现对二维视觉信息、三维空间信息、关节信息、力触觉信息、声音信息的“完整”模态信息采集。

集成触觉感知,抓取豆腐等易碎物

特别的是,针对于力触觉感知部分,ZERITH-H1搭载了触觉夹爪,集成了高分辨率视触觉传感器,实现对抓取力触觉的精准感知。零次方在视触觉传感器方面技术积累深厚,源于清华AI&Robot实验室。实验室曾提出过超越人类触觉感知水平的超光谱视触觉传感方案,相关视触觉成果多次获ICRA、IROS Best Paper Finalists、多次在T-RO、Soft Robotics、T-MECH上发表相关研究。

低延迟、高动态响应的遥操系统:为了进一步满足实时同步操作的需求,零次方将机器人与采集者通讯延迟无限推进至零延迟,实现“孪生式”映射同步感知;同时整体设备连续运行时间超过4小时,满足长时间不间断的数据采集需求。

VR遥操演示

VR APP 快速构建物理世界与虚拟世界交互渠道:基于主流vr设备自研ZERITH-VR APP,实现遥操作设备与机器人本体、具身数据管理平台超低数据传输延时。同时通过“一键式”设备连接、“引导式”数据采集工作流,帮助用户快速掌握复杂任务数据采集能力,确保数据收集质量、提升数据采集效率。

具身数据采集管理平台:将采集的多元化数据,转为即用型训练燃料

针对数据采集任务多样、采集流程繁杂、数据管理及可视化等需求,零次方自研具身数据管理平台用于数据全流程管理,依托自身开发模型的经历,通过数万次的数据采集与测试,不断测试数据管理平台易用性,现正式对外推出具有:对具身任务数据分类、清洗、标注、检索等模块化高易用性的具身数据采集管理平台。

集成高效训练与部署工具链:让训练与场景落地更迅捷、更简易化

同时,为让用户可快速、便捷式将数据集应用于模型训练,零次方数据平台设计兼容主流开源算法框架的标准化接口(如ACT、Diffusion Policy、DP3等);数据接口兼容对基座模型(Pi0、GROOT、ZERITH-V0等)的后训练(LORA、Full tuning、RL等),提供符合许可证要求的快速训练接入能力。

在模型训练过程,零次方深度集成AI训练工具Swanlab,实现对模型训练的全过程记录、实时监控、数据可视化与批量实验分析,帮助用户科学调参、管理历史训练实验数据,高效迭代自己的具身智能模型。

在模型推理上,机器人最高可选500TOPS算力主机,集成易用部署的框架,优化推理效果,实现丝滑动作执行,真实可见的在场景中的落地效果。

雷峰网雷峰网

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
俄军再轰敖德萨,乌前线曝断水断粮,英国重启对俄热线

俄军再轰敖德萨,乌前线曝断水断粮,英国重启对俄热线

青青衫书生
2026-08-13 19:06:39
猫一杯封号、张美丽被捕:4个靠无底线爆红的网红,全凉了

猫一杯封号、张美丽被捕:4个靠无底线爆红的网红,全凉了

四海神君
2026-08-10 12:26:09
泰山陪爬变陪“睡”?贴身搂抱、明码标价变味儿,这山爬得太辣眼

泰山陪爬变陪“睡”?贴身搂抱、明码标价变味儿,这山爬得太辣眼

凉了时光人
2026-07-28 19:30:08
英国刚没收敬业钢厂,转头喊比亚迪来建厂,比亚迪一句话让英国彻底破防

英国刚没收敬业钢厂,转头喊比亚迪来建厂,比亚迪一句话让英国彻底破防

浯江孤舟
2026-08-13 13:09:19
50岁翁帆开启新生活!看望老兵捐款60万,穿新中式蓝上衣人美心善

50岁翁帆开启新生活!看望老兵捐款60万,穿新中式蓝上衣人美心善

照见古今
2026-08-03 13:28:47
“统一”不会等到台湾换届,国民党主席候选人不改口号是做无用功

“统一”不会等到台湾换届,国民党主席候选人不改口号是做无用功

时光漫游志
2026-08-13 14:27:35
充实式穿搭,自习与展露自身没有矛盾点

充实式穿搭,自习与展露自身没有矛盾点

分享情感的梅梅
2026-08-13 08:44:22
南京暴雨里的“良心工程”刷屏,这届市民是真会夸人

南京暴雨里的“良心工程”刷屏,这届市民是真会夸人

夕落秋山
2026-08-13 08:13:08
人老了才发现:经常吵架的夫妻,到了晚年,多半逃不开两种结局

人老了才发现:经常吵架的夫妻,到了晚年,多半逃不开两种结局

心理观察局
2026-06-21 06:52:04
比美国还嚣张,扣押中国人?中国迅速反击,抓捕一百多名菲律宾人

比美国还嚣张,扣押中国人?中国迅速反击,抓捕一百多名菲律宾人

观史搜寻着
2026-08-13 16:27:07
徘徊不前!《功夫女足》排片6.7%,日票房400多万,累计22.8亿!

徘徊不前!《功夫女足》排片6.7%,日票房400多万,累计22.8亿!

调侃国际观点
2026-08-13 13:59:40
黑龙江一位大爷给孙子办升学宴,摆了35桌结果来人凑不够2桌,崩溃直呼“没人来也没收到礼钱”

黑龙江一位大爷给孙子办升学宴,摆了35桌结果来人凑不够2桌,崩溃直呼“没人来也没收到礼钱”

Mr王的饭后茶
2026-08-13 10:18:37
53岁袁立家中办康复派对!瘦脱相还又跳又唱,屋内装修老土太朴素

53岁袁立家中办康复派对!瘦脱相还又跳又唱,屋内装修老土太朴素

动物奇奇怪怪
2026-07-16 14:51:53
闫学晶案终于判了!结局大快人心,何庆魁的一个举动戳破两人关系

闫学晶案终于判了!结局大快人心,何庆魁的一个举动戳破两人关系

舍长阿爷谈事
2026-06-24 10:01:18
以后可能没有铁饭碗了,网传体制内已裁120万人

以后可能没有铁饭碗了,网传体制内已裁120万人

互联网大观
2026-08-10 15:16:40
杀疯了!7天三跌停!暴涨83%后回撤27%!3.74万散户深套,谁在砸盘?

杀疯了!7天三跌停!暴涨83%后回撤27%!3.74万散户深套,谁在砸盘?

趋势清风侠
2026-08-13 16:09:31
彻底摊牌了?一个欠9亿一个骗13.9亿,董卿被爆猛料,原来她和王丽坤同样困境

彻底摊牌了?一个欠9亿一个骗13.9亿,董卿被爆猛料,原来她和王丽坤同样困境

她时尚丫
2026-08-07 18:55:34
这家融担竟是“假国资”,助贷合作多家银行

这家融担竟是“假国资”,助贷合作多家银行

新浪财经
2026-08-13 17:42:57
中国公开赛八强出炉!中国军团两胜四负,Top16仅剩三人遭重创

中国公开赛八强出炉!中国军团两胜四负,Top16仅剩三人遭重创

世界体坛观察家
2026-08-14 00:34:03
一个家庭最大的灾难是:夫妻到了六十岁,还处于这两种状态

一个家庭最大的灾难是:夫妻到了六十岁,还处于这两种状态

心理观察局
2026-06-22 07:17:31
2026-08-14 03:31:00
雷峰网 incentive-icons
雷峰网
关注智能与未来!
70490文章数 656212关注度
往期回顾 全部

科技要闻

一切皆插件!DeepSeek Harness正式发布

头条要闻

冉莹颖被指称“输了换老公有保险”邹市明深夜回应

头条要闻

冉莹颖被指称“输了换老公有保险”邹市明深夜回应

体育要闻

负债十几亿的联赛,还在疯狂买球星

娱乐要闻

篡改红歌已立案,郭德纲大祸临头

财经要闻

可治疗癌症?神话破灭的片仔癀 陷入争议

汽车要闻

全新红旗H7到底新在哪儿?

态度原创

健康
家居
本地
艺术
公开课

孩子高低肩,是不是脊柱侧弯了?!

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

黄州一夜,苏轼写给普通人的月光

艺术要闻

1水彩界最狠的“阴谋”:每一笔都是提前预谋,看完他们的建筑画,我再也不敢说自己懂艺术了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版