网易首页 > 网易号 > 正文 申请入驻

助力英伟达具身成果,他山科技数采设备实现数据跨形态迁移

0
分享至


双方合作从仿真层延伸到硬件层。

本文为IPO早知道原创

作者|SY

据IPO早知道消息,美国时间11月9日,机器人学习国际会议CoRL 2026上,英伟达科学家Jim Fan发表主题演讲,正式介绍新一代机器人基础模型GR00T 2及其配套技术,并公布了覆盖机器人模型、仿真环境、智能体框架、数据集乃至硬件设计的开源计划。

其中,用于灵巧手数据采集的可穿戴数采设备DexUMI,从指尖到手掌,所有触觉感知方案皆采用他山科技触觉传感器。高精度触觉感知,成为该设备采集精细操作数据的关键能力之一。


英伟达科学家Jim Fan介绍可穿戴数采设备DexUMI(来源:他山科技,下同)

搭载他山触觉传感器,补齐灵巧操作的关键细节

GR00T 2 是英伟达面向通用机器人推出的最新世界动作模型(World-Action Model,WAM),可以接收语言指令、多视角相机画面和机器人状态,预测机器人下一步的动作,也同时预测动作执行后周围环境将发生的变化。

除动作预测外,其另一项关键能力是X-Adapt跨形态技能迁移,即在更易采集数据的环境中习得操作技能,再迁移至真实机器人。而灵巧手恰恰是跨形态迁移中最具挑战的场景之一。为此,英伟达设计了可穿戴数采设备DexUMI,使机械结构与机器人手部动作形成对应关系。

触觉是其中的关键,DexUMI指尖及手掌触觉感知方案中,他山科技是唯一的触觉传感器合作方,为产品提供更精确、即时的触觉信息,研究人员佩戴操作即可采集细致的触觉数据。


英伟达GEAR实验室官网介绍DesUMI成果

Jim Fan现场展示了机器人处理香蕉、准备食物等任务,模型得以学习细腻的抓取、扭转与双手协同动作。在这类精细操作中,触觉感知不可或缺。


DexUMI指尖及手掌均采用他山科技触觉传感器

陪伴英伟达完成此次突破性探索,他山科技的触觉感知能力提供了坚实支撑。他山科技传感器支持一维力到三维力测量,测力分辨率达0.01N,并可实现高分辨率触觉感知、2cm接近觉及位置判断。

具备接近觉功能的触觉传感器,使感知链路得以从接近、接触到稳定抓握完整覆盖操作过程,从而让模型能够推理出仅靠视觉难以辨识的事件。


DexUMI指尖及手掌采用他山科技触觉传感器

正如Jim Fan此前指出的:为追求高层次理解,视觉编码器会主动丢弃低级细节,而这些微小细节恰恰对机器人的灵巧操作至关重要。触觉,正是补齐这些"细节"的关键通道。

从软硬件结合到协同开源,让机器人走入“夏天”

在英伟达发布的论文介绍中,实验人员仅通过DexUMI演示,即帮助机器人使用灵巧手完成了准备香蕉酸奶和舀取麦片的连续制作任务。


DexUMI操作演示

除此之外,英伟达在X-Adapt框架中把仿真作为重要数据来源,先通过强化学习生成操作轨迹、加入域随机化扰动,再微调GR00T 2并迁移到真实机器人。在仿真方面,此前,他山科技作为英伟达Isaac Sim全球首个触觉仿真合作伙伴,共同构建了高精度、高频率的触觉传感器仿真模型。

此次结合可穿戴数采设备DexUMI,双方合作已从仿真层延伸到硬件层,形成软硬件协同的深度闭环。


他山科技基于NVIDIA Isaac Sim 建立的触觉模拟仿真模型调用流程

Jim Fan在发布中指出,前沿推理模型的进步没有让机器人研究失去意义,反而降低了开发门槛、抬高了能力上限——"机器人研究不再是一项精英运动。"

英伟达此次开放了整个技术栈:包括GR00T 2/GR00T 2 Turbo、仿真工具SimFoundry、智能体框架ASPIRE、数据标注模型套件Flora、Human-1M数据计划。

同时,英伟达还开放了首批10万小时高质量第一视角人类视频数据以及部分机器人数据采集硬件的设计方案,包括UMI、DexUMI等设备。贯穿数据采集、处理、模型训练与机器人执行,让开发者能够构建、适配和部署自己的物理技能。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
摩纳哥国庆:夏琳独揽摄政大权,母女装赢麻!碧翠丝生三胎显疲态

摩纳哥国庆:夏琳独揽摄政大权,母女装赢麻!碧翠丝生三胎显疲态

时间巡查
2026-11-20 23:42:51
尘埃落定!国乒11人出战总决赛,孙颖莎王楚钦王曼昱带队,林诗栋压哨绝杀

尘埃落定!国乒11人出战总决赛,孙颖莎王楚钦王曼昱带队,林诗栋压哨绝杀

曹说体育
2026-11-22 19:47:14
男篮12人名单预测!王哲林挤掉余嘉豪,后卫3人锁定,庞峥麟备选

男篮12人名单预测!王哲林挤掉余嘉豪,后卫3人锁定,庞峥麟备选

体坛大事记
2026-11-22 12:36:24
11月23日精选热点:封装基板迎来新突破  这2大龙头要逆势大涨

11月23日精选热点:封装基板迎来新突破 这2大龙头要逆势大涨

元芳说投资
2026-11-22 19:34:51
2026年1-10月燃油车累计销量排行(轿车/SUV)

2026年1-10月燃油车累计销量排行(轿车/SUV)

中汽数研
2026-11-22 16:47:17
泰山队巨变来袭!全员休整一月静待冬训,10大人员悬念彻底曝光

泰山队巨变来袭!全员休整一月静待冬训,10大人员悬念彻底曝光

体坛小鹏
2026-11-22 14:56:46
两性关系:发现了没,寿命长的男人,大多都有这五个好习惯

两性关系:发现了没,寿命长的男人,大多都有这五个好习惯

荔子言
2026-11-03 10:32:30
事态已经全面升级!赖清德有可能成为新中国历史上,唯一一位在任台湾地区领导人中出现重大变故的人物

事态已经全面升级!赖清德有可能成为新中国历史上,唯一一位在任台湾地区领导人中出现重大变故的人物

人生录
2026-09-11 00:05:21
网友为什么回怼赵本山的《慌啥子嘛》

网友为什么回怼赵本山的《慌啥子嘛》

梅语声声
2026-11-22 21:10:38
飙进三分后致意!文班:我得给赛琳娜秀一把

飙进三分后致意!文班:我得给赛琳娜秀一把

北青网-北京青年报
2026-11-22 20:55:02
特朗普APEC入住房间曝光:两大高层湾景套房,最大套房足足389㎡

特朗普APEC入住房间曝光:两大高层湾景套房,最大套房足足389㎡

云上乌托邦
2026-11-22 20:15:04
徐冬冬当初就那么成熟了?黑丝袜搭配红色毛衣女人味四溢!

徐冬冬当初就那么成熟了?黑丝袜搭配红色毛衣女人味四溢!

说不尽的人心
2026-11-22 10:44:29
樊振东又立功!德国乒协不配WTT玩了,中国上海新增乒乓球冠军赛

樊振东又立功!德国乒协不配WTT玩了,中国上海新增乒乓球冠军赛

曹说体育
2026-11-21 21:54:20
宏远速递!小陈总正式下课,徐杰顶薪稳了,陈老板用行动证明广东不缺钱

宏远速递!小陈总正式下课,徐杰顶薪稳了,陈老板用行动证明广东不缺钱

多特体育说
2026-11-22 13:10:56
央视再曝新毒物!致癌物超标20多倍,流窜至全国多地,害惨老百姓

央视再曝新毒物!致癌物超标20多倍,流窜至全国多地,害惨老百姓

青梅侃史啊
2026-11-22 11:32:03
我57岁,突然发现一个残忍真相:极度自律,每天锻炼的人,不一定能长寿,但是,极度自私,不为任何人、任何事操心的人很可能长寿

我57岁,突然发现一个残忍真相:极度自律,每天锻炼的人,不一定能长寿,但是,极度自私,不为任何人、任何事操心的人很可能长寿

犀利辣椒
2026-10-21 06:21:56
中国历史上,至今下落不明的10位著名人物

中国历史上,至今下落不明的10位著名人物

文史达观
2025-10-11 06:45:03
46岁方力申创造奇迹!8小时从香港游到澳门,引发全网热议

46岁方力申创造奇迹!8小时从香港游到澳门,引发全网热议

音乐浪漫屋
2026-11-22 19:06:58
“不是因为开APEC会议,是一直都很漂亮”,这句话为啥火了

“不是因为开APEC会议,是一直都很漂亮”,这句话为啥火了

环球网资讯
2026-11-21 21:14:22
真的是“解脱”了!福建抗癌博主连元聪去世,年仅36岁,因癌症瘫痪10年,妻子照顾10年

真的是“解脱”了!福建抗癌博主连元聪去世,年仅36岁,因癌症瘫痪10年,妻子照顾10年

裕丰娱间说
2026-11-22 10:25:18
2026-11-22 22:04:49
IPO早知道 incentive-icons
IPO早知道
IPO情报专家。
7635文章数 2415关注度
往期回顾 全部

科技要闻

Anthropic收涨17.1%,市值一度破2万亿美元

头条要闻

百万粉丝主播被指私闯他人果园直播糟蹋苹果 警方回应

头条要闻

百万粉丝主播被指私闯他人果园直播糟蹋苹果 警方回应

体育要闻

全场挨打1比4溃败 阿隆索已过保质期?

娱乐要闻

杨颖姐弟烧香被偶遇,清秀少年变粗犷大叔

财经要闻

沪深交易所、中国结算推出一揽子降费措施

汽车要闻

旗舰纯电大六座 2027款岚图泰山将于广州车展预售

态度原创

游戏
旅游
家居
数码
公开课

女流化身佛州逼兜侠!GTA6 NPC素质吊差 必须教训

旅游要闻

山西临汾洪洞:一树藏千年文脉,一域系万家根魂

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

消费电子内卷下的封装破局:板级封装为音频芯片按下小型化加速键

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版