网易首页 > 网易号 > 正文 申请入驻

无需操控真机,自变量发布TwinDEX灵巧操作手

0
分享至

21世纪经济报道记者林典驰

9月1日,自变量发布TwinDEX——一对孪生的三指九自由度灵巧操作手:一个可穿戴,用于数据采集;一个装在机器人上,用于真机部署。这首次实现了纯无本体数据、零真机遥操作数据驱动的灵巧操作。

TwinDEX由一套可穿戴的无本体数据采集系统和一套与之匹配的机器人末端执行器组成,让基础模型仅用数百条无本体数据进行后训练,全程不引入真机遥操作数据,就能学会操控三指灵巧手完成复杂任务。

自变量称,评测显示,TwinDEX的无本体数据采集效率达到真机遥操作的5.3倍;训练模型时无本体数据可100%替代真机遥操作数据。

过去,真机遥操作数据因包含丰富的物理交互信息,被视为最有价值、也最难规模化的数据。TwinDEX则通过保持采集端与执行端的一致性,并结合完备的数据处理管线和模型训练流程,让无本体数据也能达到媲美真机数据的训练效果。

这意味着,灵巧操作训练不再完全受制于高成本真机数据,为规模化采集无本体数据、推动机器人能力提升找到了新的可行路径。

TwinDEX展示了一项完整的化学实验演示:从开瓶取样、滴管与试管操作,到玻璃棒引流、摇匀观察,全程由策略自主执行,一镜到底。整个实验包含24个子动作,跨越三种工具、多次双手协调与工具切换,每一步都要求毫米级定位与稳定力控。

实验过程中,机器人首先双手协同旋开试剂瓶,依靠指端侧摆而非手腕旋转完成旋拧;随后抓取细柄药勺,在狭小瓶口内完成取样并将固体转移至烧杯。面对细小的弹性滴管,机器人需要用三指精确包络,完成吸液、挤压和滴液;在玻璃棒引流环节,则要一手稳定玻璃棒,另一手沿棒面缓慢倒液,同时维持两个接触约束,最后完成摇匀观察。

从旋拧、取样到滴液、引流,整套任务涵盖精细物体操作、复杂工具切换、双手协调以及接触力控制,对机器人灵巧操作能力提出了较高要求。

更重要的是,这套策略100%由无本体数据训练:TwinDEX仅使用数百条数据,全程未引入任何真机遥操作数据,训练完成后即可直接部署到机器人上,使其自主完成整个实验。以更少的数据、更低的采集成本,完成复杂任务,验证了无本体数据用于灵巧操作训练的巨大潜力。

要让灵巧操作真正走向规模化,既需要手的灵巧设计,也要让无本体数据能够高效训练模型,并让数据采集能够规模化拓展。围绕这三个目标,TwinDEX从灵巧性、一致性和可规模化三个方面进行设计。

灵巧性方面,TwinDEX采用三指九自由度、其中七个为主动自由度的设计,在灵巧性、可靠性和成本之间取得平衡。基于覆盖多种元操作的测试,自变量发现,三指通过拇指、食指和中指的协同配合,能够完成生活场景中的大多数操作,是灵巧操作的“最小可行性解”。配合足够好的基础模型,足以胜任各种复杂操作。

一致性是无本体数据可以直接用于机器人策略学习的关键。跨本体数据采集往往存在采集端与执行端之间的运动学差异和精度损失,数据难以直接迁移,需要用真机数据进行对齐或微调。TwinDEX则以“纯无本体数据训练”为目标,以最终应用性能为锚点,反向设计采集端需要达到的一致性指标。

具体来说,在运动学上保持自由度、关节轴和连杆比例一致;在接触力学上保持接触材料、几何和表面特性一致,并配置对应触觉传感器;在视觉上保持外观一致;同时针对关节定位、手腕定位、抖动和漂移等关键精度指标进行优化。在此基础上,自变量还通过模型与训练策略的针对性设计,进一步提升策略对可接受误差的容忍度,降低采集端与部署端残余差异对任务性能的影响。

灵巧操作的数据问题,长期存在一个“不可能三角”:数据质量、灵巧性和可规模化难以兼得。高精度遥操作数据质量高、灵巧性强,但采集成本高;低成本采集易于规模化,却往往难以兼顾数据质量;高灵巧性的五指系统虽然操作上限更高,但硬件成本也相应上升,难以实现规模化采集。

TwinDEX在全球范围内首次实现了三者的结合:通过让采集端与执行端在运动学、接触力学和视觉外观上高度一致,在保证数据质量的同时实现灵巧操作,并将数据采集效率提升至真机遥操作的5倍以上。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
郑钦文输球那一刻,她脸上的表情比平时任何一场比赛都要沉重。

郑钦文输球那一刻,她脸上的表情比平时任何一场比赛都要沉重。

耿耿有态度
2026-05-27 13:10:37
6-3,6-2,郑钦文横扫昔日克星,终结三连败+复仇8年之耻,下轮对手更强

6-3,6-2,郑钦文横扫昔日克星,终结三连败+复仇8年之耻,下轮对手更强

主宰稳场
2026-08-25 09:21:40
“上不了台面的妈很丢人!”毕业典礼女子出洋相,父子表情很真实

“上不了台面的妈很丢人!”毕业典礼女子出洋相,父子表情很真实

世界圈
2026-07-10 09:13:52
40岁刘文辉独闯蒋介石鸿门宴:你敢杀我,十万藏彝兵立刻反川

40岁刘文辉独闯蒋介石鸿门宴:你敢杀我,十万藏彝兵立刻反川

近史谈
2026-09-02 19:55:42
直降19万?奥迪A6L跌成“白菜价” ,现在入手值吗?

直降19万?奥迪A6L跌成“白菜价” ,现在入手值吗?

沙雕小琳琳
2026-09-03 11:57:02
将赴大陆参加APEC,深绿政客表态不一般,黄国昌将赖清德一军

将赴大陆参加APEC,深绿政客表态不一般,黄国昌将赖清德一军

林子说事
2026-09-02 01:08:12
谷歌深夜放大招:Gemini 3.8 Flash上线,猛攻AICoding和Agent

谷歌深夜放大招:Gemini 3.8 Flash上线,猛攻AICoding和Agent

人人都是产品经理社区
2026-09-03 01:01:15
快讯!关于郭德纲的消息!

快讯!关于郭德纲的消息!

故事终将光明磊落
2026-09-03 10:59:34
沙漠下面几乎全都是石油,那么我们为什么不开采,说白了,不是我们不开采,是我们没有办法采

沙漠下面几乎全都是石油,那么我们为什么不开采,说白了,不是我们不开采,是我们没有办法采

扶苏聊历史
2026-09-01 16:44:34
全球最大岛礁被我国收回!面积相当于四个深圳,曾遭美菲合力抢夺

全球最大岛礁被我国收回!面积相当于四个深圳,曾遭美菲合力抢夺

军机Nova
2026-08-28 00:18:12
论敢问还得是京爷,京城人思想觉悟就是高,可惜没有人能回答这个问题。

论敢问还得是京爷,京城人思想觉悟就是高,可惜没有人能回答这个问题。

放开他让wo来
2026-09-03 09:33:30
笑麻了,《披哥》三个歌手硬唱不过一个演员,余文乐的眼神想刀人

笑麻了,《披哥》三个歌手硬唱不过一个演员,余文乐的眼神想刀人

寒士之言本尊
2026-09-02 23:29:50
当年抢不到的豪宅再现江湖,深圳万科瑧山府10套房产挂牌转让

当年抢不到的豪宅再现江湖,深圳万科瑧山府10套房产挂牌转让

第一财经资讯
2026-09-02 20:22:13
荷兰将约86吨黄金储备从美加转移至英国

荷兰将约86吨黄金储备从美加转移至英国

新华社
2026-09-03 06:38:04
TA:穆帅心仪恩佐、看好M费;维尼修斯曾想去阿森纳

TA:穆帅心仪恩佐、看好M费;维尼修斯曾想去阿森纳

懂球帝
2026-09-03 11:59:15
球迷调侃中国男篮:7年前我们有波兰中锋,7年后我们有波特兰中锋

球迷调侃中国男篮:7年前我们有波兰中锋,7年后我们有波特兰中锋

何揎室内设计
2026-09-02 12:21:44
普京谈是否打击英国军事目标

普京谈是否打击英国军事目标

参考消息
2026-09-02 14:16:13
美网最大冷门出现:世界排名第124位的中国选手布云朝克特,3-0横扫世界第13的西班牙选手霍达尔,晋级第二轮

美网最大冷门出现:世界排名第124位的中国选手布云朝克特,3-0横扫世界第13的西班牙选手霍达尔,晋级第二轮

鲁中晨报
2026-09-03 09:14:03
民政部、中央社会工作部、财政部、全国老龄办、中国老龄协会,联合印发通知

民政部、中央社会工作部、财政部、全国老龄办、中国老龄协会,联合印发通知

政知新媒体
2026-09-02 16:34:53
无底线了!内塔尼亚胡之子被伊朗特工暗杀,弃行李连夜逃回以色列

无底线了!内塔尼亚胡之子被伊朗特工暗杀,弃行李连夜逃回以色列

梦史
2026-08-29 06:21:20
2026-09-03 12:31:00
21世纪经济报道 incentive-icons
21世纪经济报道
中国商业新闻领导者
270488文章数 745087关注度
往期回顾 全部

科技要闻

大模型扎堆!谷歌刚发,Meta就跟上

头条要闻

越南可能购买法国"阵风"战机 装备战略或出现重大转变

头条要闻

越南可能购买法国"阵风"战机 装备战略或出现重大转变

体育要闻

小卡回应处罚:不知晓任何规避工资帽意图

娱乐要闻

德云社停更20天再营业!

财经要闻

再见了,期房!商品房预售制卒于2026

汽车要闻

配双腔空悬+机械差速锁 传祺越7预售权益价17.18万起

态度原创

家居
时尚
教育
房产
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

白衬衫不火了?早秋穿“棕色衬衫”更高级好看

教育要闻

“Get in Someone’s Hair” ≠ 钻进头发里!这个让马克·吐温都头疼的英语习语到底什么来头?

房产要闻

新四代住宅 新样板间开放丨以艺术之名 赴一场迭代之约

军事要闻

特朗普威胁伊朗终极打击蓄势待发

无障碍浏览 进入关怀版