网易首页 > 网易号 > 正文 申请入驻

机器人学新任务要多久?具身ICL把答案从年缩到秒

0
分享至

一个机器人学会抓取一个新物体,需要多久?过去答案是几百条数据、数周训练。现在,一批创业公司给出的新答案是:看一遍示范视频就够了。

这就是具身智能领域正在升温的 In-Context Learning(ICL,上下文学习)——让机器人在部署后,利用当前场景中的上下文信息快速适应新任务,而不是回到训练场重新学习。量子位对可可矩阵 CEO 高宇翔的深度访谈,系统梳理了这一技术路线的最新进展。


从概念到工程验证

具身 ICL 不再是纸上谈兵。Skild AI 的 S1 和 Generalist AI 的 GEN-1.5 已经展示了机器人通过单次示范视频完成新任务的能力。这意味着,机器人不再只是"会多少任务"的静态工具,而是具备了"学一个新任务要多久"的动态能力维度。

高宇翔认为,具身智能的 Scaling(规模化)维度正在发生扩展——从单纯堆数据,转向部署后的快速学习能力。他提到,纯堆数据路线在单一任务上有效,大约 200 条数据就能拟合,但无法涌现通用泛化能力。行业开始关注机器人在新环境、新任务中能否利用当前 Context 快速适应,ICL 由此成为新的 Scaling 方向。

三大技术难点待解

具身 ICL 要落地,绕不开三个硬骨头:

  • 视觉表征:需要同时覆盖高层语义与精细空间信息,既要"看懂"物体是什么,也要"看清"物体在哪、怎么抓。
  • 多模态对齐:触觉、本体感觉的数据量远落后于视觉和语言,数据规模差异巨大。
  • 长时序 Memory:需要流式压缩与筛选机制,而非简单扩展上下文窗口。

高宇翔特别强调,他们理解的 Long Context 更接近一种流式机制——不是把历史数据全部塞进窗口,而是持续压缩、筛选、保留关键信息。

「条件表征」:让视觉跟着任务走

可可矩阵的技术路线是把 ICL 前置到预训练阶段,核心是提出「条件表征」概念。传统视觉 Embedding 是固定提取图像特征,而条件表征会根据任务意图动态调制——抓杯子时关注位置和深度,识别时关注语义。

高宇翔的原话是:"一个适合机器人的视觉表征,不应该只由'我看到了什么'决定,还应该由'我现在想做什么'共同决定。"

这套「强理解、轻生成」架构的效果已经初步显现:实验显示,60M 参数的动作头可以超越 1.1B 参数的对照方案。目前,可可矩阵在简单抓取任务上的 One-Shot 成功率已超过 80%。

衡量标准也在变

成功率之外,行业正在引入新的评估维度。高宇翔提出,未来应以「第一次成功平均耗时」替代单一成功率作为核心指标——简单任务追求看一次就成功,复杂任务期望学习周期接近人类培训周期。

Self-Correction(自我纠正)被视为 ICL 的自然延伸:机器人可以利用失败轨迹进行上下文学习,从错误中迭代。这背后的逻辑是,如果前面的视觉理解足够准确,后面的动作解码其实没有必要设计得特别重。

以后衡量机器人智能,可能不只是看它已经会多少任务,还要看它学会一个新任务到底需要多久。这个维度一旦确立,具身智能的竞争逻辑将彻底改变。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
比当年日军还残忍!乌军储备大批女兵,俄军迎来好消息,普京出手

比当年日军还残忍!乌军储备大批女兵,俄军迎来好消息,普京出手

面包夹知识
2026-09-07 14:45:21
71岁演员寇振海18岁儿子寇家宝考上帝国理工学院

71岁演员寇振海18岁儿子寇家宝考上帝国理工学院

韩小娱
2026-09-08 06:43:32
迷乱过后我将重生

迷乱过后我将重生

青苹果sht
2026-09-08 05:52:09
赵勇辞职下课?总局局长点名,女排官宣,龚翔宇表态期待,目标曝光

赵勇辞职下课?总局局长点名,女排官宣,龚翔宇表态期待,目标曝光

舌尖小游记
2026-09-07 12:17:01
一个被很多人忽略的史诗时刻:特斯拉可能正在把电池工艺推向爆发

一个被很多人忽略的史诗时刻:特斯拉可能正在把电池工艺推向爆发

旧史新谭
2026-09-07 18:40:37
中国女篮71-51意大利!球员评分5人优秀,最佳球员不是张子宇韩旭

中国女篮71-51意大利!球员评分5人优秀,最佳球员不是张子宇韩旭

顺静自然
2026-09-08 08:48:14
湖南男子谎称给表姐介绍对象,转身将自己包装成“高富帅”与其交友,骗取表姐1.5万元;警方:丁某(男,28岁)已被刑拘

湖南男子谎称给表姐介绍对象,转身将自己包装成“高富帅”与其交友,骗取表姐1.5万元;警方:丁某(男,28岁)已被刑拘

大风新闻
2026-09-08 11:13:03
给胖东来供货十七年的牟强说,这里一边是天堂,一边是地狱。天堂是账期短,货款七天左右就能到账,地狱则是...

给胖东来供货十七年的牟强说,这里一边是天堂,一边是地狱。天堂是账期短,货款七天左右就能到账,地狱则是...

背包旅行
2026-09-07 18:50:04
美国法庭炸锅了!9月2号,被美军抓捕拘押在美国的马杜罗,他的律师团队抛出了一个惊人的逻辑死局,直接把美国法官都给搞懵了。

美国法庭炸锅了!9月2号,被美军抓捕拘押在美国的马杜罗,他的律师团队抛出了一个惊人的逻辑死局,直接把美国法官都给搞懵了。

回京历史梦
2026-09-06 20:35:03
“92号汽油,6元/升?”

“92号汽油,6元/升?”

网络易不易
2026-09-08 11:00:50
都是自研芯片,为什么麒麟9050和玄戒O3的差距,越追反而越大了

都是自研芯片,为什么麒麟9050和玄戒O3的差距,越追反而越大了

春雨说科技
2026-09-07 18:34:22
多名院士呼吁快停止食用,吃一口等于14斤塑料袋,女子因肾衰走了

多名院士呼吁快停止食用,吃一口等于14斤塑料袋,女子因肾衰走了

任医生聊健康
2026-06-18 22:00:09
金晨正式回应出国生子!

金晨正式回应出国生子!

大爱三湘
2026-09-08 00:01:27
全新奔驰GLE:375马力3.0T+612马力4.0T V8,豪华与性能双巅峰

全新奔驰GLE:375马力3.0T+612马力4.0T V8,豪华与性能双巅峰

小怪吃美食
2026-09-06 13:46:56
班主任不会告诉你:分班不是随机的,其实是按这几个标准分的

班主任不会告诉你:分班不是随机的,其实是按这几个标准分的

侃故事的阿庆
2026-09-07 06:12:56
房子遭人强拆,因反抗坐3年牢!出狱后扬言:不赢官司就杀人

房子遭人强拆,因反抗坐3年牢!出狱后扬言:不赢官司就杀人

就一点
2026-09-07 16:12:17
连续4轮打脸美网官方!郑钦文:老天让我吃了很多苦 现在回报我了

连续4轮打脸美网官方!郑钦文:老天让我吃了很多苦 现在回报我了

风过乡
2026-09-08 07:19:41
甘肃榆中染色莴笋刷屏:13个仓库一半在泡药水,你挑的“新鲜菜”可能是染出来的?

甘肃榆中染色莴笋刷屏:13个仓库一半在泡药水,你挑的“新鲜菜”可能是染出来的?

一盅情怀
2026-09-07 11:44:31
废品站最近疯了!这5种旧货身价暴涨,家里有的千万别手欠扔掉

废品站最近疯了!这5种旧货身价暴涨,家里有的千万别手欠扔掉

朗威谈星座
2026-09-08 04:01:03
特斯拉无稀土电机10秒造一台!每台省1000美元,稀土用量归零?

特斯拉无稀土电机10秒造一台!每台省1000美元,稀土用量归零?

麓谷隐士
2026-09-07 00:10:03
2026-09-08 21:08:50
野生运营
野生运营
懂点产品,懂点AI,正在努力给平淡日子搞点新花样。
257文章数 87关注度
往期回顾 全部

科技要闻

小米再次背水一战

头条要闻

美国中期选举临近 纽森呼吁民主党:硬气起来

头条要闻

美国中期选举临近 纽森呼吁民主党:硬气起来

体育要闻

韩旭:我一定会再次走出去

娱乐要闻

郭德纲被处罚,郭麒麟被曝恋情瓜

财经要闻

智谱六连跌失守1000大关,发生了什么?

汽车要闻

领克20 领克的纯电小钢炮这次更运动了

态度原创

教育
亲子
游戏
时尚
旅游

教育要闻

多所顶尖名校,停招学硕

亲子要闻

工程车小故事:拿错快递

肉腿之后,日本人又将XP卷向了大胃袋

秋冬穿对红黄橙,温暖又高级

旅游要闻

赓续长征精神 奋进复兴征程丨江西于都:长征出发地的红色文旅新体验

无障碍浏览 进入关怀版