网易首页 > 网易号 > 正文 申请入驻

断交OpenAI后,人形机器人独角兽首秀:一个神经网络控制整个上身

0
分享至

白交 发自 凹非寺
量子位 | 公众号 QbitAI

与OpenAI断交之后,Figure首个成果出炉:

Helix,一个端到端通用控制模型,它能让机器人像人一样感知、理解和行动。

只需自然语言提示,机器人就能拿起任何东西,哪怕是从没见过的东西,比如这个活泼的小仙人掌。

从官方放出的演示中可以看到,它在接收到人类的提示后,就会按照指令逐一拿起桌上的物品放进冰箱。

“机器人站着不语,只是一味地执行指令”

两个机器人也可以共同协作,但有意思的一点是,他们竟然共用同一组神经网络。

△加速2倍

来看看具体是怎么一回事。

像人类一样思考的AI

从技术报告上看,这个通用“视觉-语言-动作” (VLA) 模型完成了一系列的首创:

整个上身控制,Helix是首个能对整个上身(包括手腕、躯干、头部和各个手指)进行高速率(200Hz)连续控制的VLA。

多机器人协作,第一个同时在两个机器人上运行的 VLA,使它们能够使用从未见过的物品解决共享的、远程操作任务。

拿起任何东西,只需按照自然语言提示,就能拿起几乎任何小型家居物品,包括数千种它们从未遇到过的物品。

一个神经网络,与之前的方法不同,Helix 使用一组神经网络权重来学习所有行为(挑选和放置物品、使用抽屉和冰箱以及跨机器人交互),而无需任何针对特定任务的微调。

可立即商业化部署,第一款完全在嵌入式低功耗 GPU 上运行的 VLA,可立即进行商业部署。

Helix由两个系统组成,两个系统经过端到端训练,并且可以进行通信。

系统2:VLM主干,基于在互联网规模数据上预训练的7B开源VLM,它将单目机器人图像和机器人状态信息(包括手腕姿势和手指位置)投射到视觉语言嵌入空间后进行处理。

工作频率为 7-9 Hz,用于场景理解和语言理解,可对不同对象和语境进行广泛的泛化。

系统1:80M参数的交叉注意力Transformer,用于处理底层控制。它依靠一个完全卷积、多尺度的视觉骨干网进行视觉处理,该骨干网由完全在模拟中完成的预训练初始化而成。

将 S2 生成的潜在语义表征转化为精确的连续机器人动作,包括所需的手腕姿势、手指弯曲和外展控制,以及躯干和头部方向目标。速度为200Hz。

他们在动作空间中附加了一个合成的 “任务完成百分比 ”动作,使 Helix 能够预测自己的终止条件,从而更容易对多个任务进行排序。

这种解耦架构允许每个系统在其最佳时间尺度上运行。S2可以“慢慢思考”高级目标,而 S1 可以“快速思考”以实时执行和调整动作。

训练过程是完全端到端,从原始像素和文本命令映射到具有标准回归损失的连续动作。

并且Helix 不需要针对特定任务进行调整;它保持单个训练阶段和单个神经网络权重集,无需单独的动作头或每个任务的微调阶段。

人形机器人的Scaling Law

CEO透露,这项工作他们花费了一年多的时间,旨在解决通用机器人问题——

像人类一样,Helix可以理解语音、推理问题并能抓住任何物体。

而就在两周前,他们宣布取消与OpenAI之间的合作关系,当时就透露会在接下来的30天展示“没人在人形机器人上见过的东西”。

如今已经揭晓,就是Helix。

值得一提的是,Helix还代表着一种新型的Scaling Law。

他们认为,家庭是机器人面临的最大挑战。与受控的工业环境不同,家里堆满了无数的物品。为了让机器人在家庭中发挥作用,它们需要能够按需产生智能的新行为,尤其是对它们从未见过的物体。

当前,教机器人一种新行为需要大量的人力。要么是数小时的博士级专家手动编程,要么是数千次演示。

这两种方式成本都很高,所以都是行不通的(dont work)。

与早期的机器人系统不同,Helix能够即时生成长视界、协作、灵巧的操作,而无需任何特定任务的演示或大量的手动编程。

Helix 表现出强大的对象泛化能力,能够拾取数千种形状、大小、颜色和材料特性各异的新奇家居用品,而这些物品在训练中从未见过,只需用自然语言询问即可。

这意味着,这代表 Figure 在扩展人形机器人行为方面迈出了变革性的一步。

到时候,当Helix 扩大1000倍、机器人扩展到十亿级别,会是什么样子?有点子期待。

参考链接:
[1]https://www.figure.ai/news/helix
[2]https://x.com/adcock_brett/status/1892577936869327233

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
彭斯语出惊人:共和党输中期选举,问题不是发动战争,是没能打赢

彭斯语出惊人:共和党输中期选举,问题不是发动战争,是没能打赢

墨策史
2026-11-14 10:22:53
张佳宁被曝怀孕仅2月,张晓龙三胎首曝光,两人关系早就藏不住了

张佳宁被曝怀孕仅2月,张晓龙三胎首曝光,两人关系早就藏不住了

风月得自难寻
2026-11-16 19:24:20
大幂幂不是白叫的

大幂幂不是白叫的

草莓解说体育
2026-10-24 07:40:22
从34亿到420万,佟丽娅被观众彻底抛弃,十多位明星助力也没用

从34亿到420万,佟丽娅被观众彻底抛弃,十多位明星助力也没用

影视高原说
2026-11-15 08:25:37
泽连斯基:普京生活在另一个现实里!我不认为特朗普是“克拉斯诺夫”

泽连斯基:普京生活在另一个现实里!我不认为特朗普是“克拉斯诺夫”

鹰眼Defence
2026-11-15 17:13:26
郭德纲小儿子走路一步三摇,被批不成器,评论区留言很扎心

郭德纲小儿子走路一步三摇,被批不成器,评论区留言很扎心

领悟看世界
2026-11-16 21:02:28
真是笑不活了!34岁方博夺冠,奖杯刚递到手里,记者把话筒怼过去,所有人都等着他来一段热血宣言,他却只说了5个字,圈粉无数

真是笑不活了!34岁方博夺冠,奖杯刚递到手里,记者把话筒怼过去,所有人都等着他来一段热血宣言,他却只说了5个字,圈粉无数

锐评利物浦
2026-11-16 10:06:03
美联储,今晚将迎大消息!

美联储,今晚将迎大消息!

和讯网
2026-11-16 16:58:05
工会完败:纽森的政治胜利

工会完败:纽森的政治胜利

寰宇大观察
2026-11-16 12:55:50
世界经济奇观:腾飞的伊拉克,20年gdp增长1200%,民主的力量!

世界经济奇观:腾飞的伊拉克,20年gdp增长1200%,民主的力量!

触摸史迹
2026-11-13 17:17:41
赖清德当局不让修、不让上岸?厦金大桥最后 1 公里, 大陆这步太高明

赖清德当局不让修、不让上岸?厦金大桥最后 1 公里, 大陆这步太高明

疯狂的小历史
2026-11-16 11:14:43
大妈花50万买基金,账号忘了15年,孙子找回看到余额,全家愣住了

大妈花50万买基金,账号忘了15年,孙子找回看到余额,全家愣住了

黄家湖的忧伤
2025-08-12 17:05:12
当众拒唱国歌不认中国籍,把两个孩子全送出国,如今报应终于来了

当众拒唱国歌不认中国籍,把两个孩子全送出国,如今报应终于来了

鹤羽说个事
2026-09-02 16:51:59
博士太多,高校已经装不下了?现在就连辅导员岗位都要求博士学历,真的还有读博的必要吗?

博士太多,高校已经装不下了?现在就连辅导员岗位都要求博士学历,真的还有读博的必要吗?

高教经纬88
2026-11-16 11:40:03
1球+4场禁赛,穆里尼奥给维尼修斯定了替补方案

1球+4场禁赛,穆里尼奥给维尼修斯定了替补方案

赛场名场面
2026-11-17 02:52:58
张天爱,心气散了

张天爱,心气散了

她时尚丫
2025-05-09 22:16:09
内娱变天,大批明星集体失业求工作,有人摆摊卖菜有人悄悄转行

内娱变天,大批明星集体失业求工作,有人摆摊卖菜有人悄悄转行

猪小艳吖
2026-11-16 19:11:46
亚马逊米高梅官宣:罗伯特·帕丁森出演新一任007

亚马逊米高梅官宣:罗伯特·帕丁森出演新一任007

灰度测试中
2026-11-16 23:12:04
5场仅踢18分钟!葡萄牙32岁新队长不满热苏斯,效仿C罗,退出集训

5场仅踢18分钟!葡萄牙32岁新队长不满热苏斯,效仿C罗,退出集训

球场没跑道
2026-11-16 13:22:35
国乒女队或迎来新领军人?排除孙颖莎王曼昱,她的优势越来越突出

国乒女队或迎来新领军人?排除孙颖莎王曼昱,她的优势越来越突出

锁上的光v
2026-11-16 23:27:16
2026-11-17 03:12:49
量子位 incentive-icons
量子位
追踪人工智能动态
13685文章数 176600关注度
往期回顾 全部

科技要闻

硅谷大佬组局,帮黄仁勋杀回来!

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

体育要闻

伪强队?拥4亿豪阵欧国联6连败+世界杯出局

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

10万人逼宫英伟达,黄仁勋要复职了?

汽车要闻

更豪华更好开 问界新M8细节升级见真章

态度原创

教育
旅游
手机
本地
公开课

教育要闻

济南市历下区燕山小学教育集团将出席2026第四届课博会,解码“做中学”视域下小学科学教育生态构建

旅游要闻

秋假遛娃剑门关,全程17000步,6个小时,喜提废腿体验!

手机要闻

鞠婧祎代言 荣耀700系列四款高颜值配色公布:全系标配原生AI背屏

本地新闻

乌兰察布:以前种土豆,现在种Token

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版