网易首页 > 网易号 > 正文 申请入驻

全程无需人工参与!一杯咖啡背后的具身智能长程任务能力

0
分享至

取下手柄、接住咖啡粉、布粉、压粉、锁紧手柄、放杯、启动萃取,再到出杯、清理粉渣、冲洗手柄、器具归位——一杯咖啡从制作到清洁,机械臂全程自主完成。

这是仙工智能展示的截至目前最长程、步骤最多的机器人咖啡制作任务,全程无需人工参与。它没有将复杂流程拆成孤立的单项动作,而是保留了从准备、制作到清洁的完整过程。

做咖啡不是简单的动作叠加。手柄是否安装到位、咖啡粉是否压实、杯子是否放在合适的位置,都会影响后续操作。机器人既要完成抓取、对准、压粉等高精度动作,也要根据任务进度与当前场景,持续作出下一步决策。

这考验的是具身智能的长程任务能力:将多个前后关联的操作连接起来,从第一步持续执行到最后一步,而不是只完成某个预设动作步骤越多,任务状态的变化与动作之间的衔接就越复杂。

用「实操课」教给模型

教机器人做咖啡,不是写一份几十页的操作说明书,也不是为每个动作设定一组固定坐标,仙工智能的答案是通过真实设备上的操作示范,为模型提供学习素材,更像上「咖啡师实操课」。



先在真实的咖啡机和器具前完成示范,系统同步记录机器人「看到了什么」和「应该怎么动」——相机画面、任务指令、机械臂的位置、运动轨迹,以及抓取和放置动作,都成为训练数据。

在此基础上,仙工智能使用少量真实操作数据,对自研 VLA(视觉-语言-动作)模型进行微调,使模型能够结合当前画面与任务要求,输出相应的动作决策。

训练完成后,还需要在真实设备上反复验证。杯子位置发生变化怎么办?器具没有完全对准怎么办?真机操作中暴露的问题,会用于补充训练数据、迭代模型,逐步提升任务执行能力。

整个过程可以简单概括为:人类示范→数据采集→模型训练→真机测试→补充数据→再次训练

这套方案的另一项看点,是模型面对真实场景变化时的适应能力。机械臂使用通用型夹爪,而非咖啡专用夹具;面对位置和高度不同的咖啡杯,模型需要重新识别场景、判断动作,而不是简单复现固定轨迹。



从真实操作数据中学习,再通过真机验证与迭代,模型逐步获得完成长程任务所需的连续决策能力与场景适应能力。

机器人大脑:从模型决策到机器人真实操作

全自动咖啡制作任务的完成,关键在于机器人大脑——由它将这些决策转化为真实动作。

仙工智能机器人大脑由模型、小脑、神经构成:模型负责看懂场景、理解任务并作出决策;小脑负责运动规划和动作执行;神经通过统一接口与协议连接传感器、关节及执行器。三者协同,让模型的决策落实为机械臂连贯、精准的实际操作。

一杯咖啡看似日常,背后是对长程记忆、高精度操作、全自主执行与场景适应能力的综合考验。从压粉、锁紧到萃取、清洗,咖啡任务展示的不只是机械臂完成了多少动作,更是具身智能如何将场景理解、连续决策与精准执行连接起来,完成一项完整的长程任务。

从单个动作走向完整任务,是具身智能进入真实服务场景的重要一步。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
央视曝光!又一国民食品爆雷了,商家套路频发,一波接一波割韭菜

央视曝光!又一国民食品爆雷了,商家套路频发,一波接一波割韭菜

说宇宙
2026-10-23 18:30:05
彭德怀麾下为何名将寥寥?陈毅一语道破:他曾率2万兵刚23万大军

彭德怀麾下为何名将寥寥?陈毅一语道破:他曾率2万兵刚23万大军

吕坾极限手工
2026-10-04 20:01:41
决裂20年再相见,厉娜仍恨许飞差点打起来,马天宇大哭质问张萌

决裂20年再相见,厉娜仍恨许飞差点打起来,马天宇大哭质问张萌

冷紫葉
2026-10-23 13:15:29
官方确认三球走步!NBA裁判协会:他收球之后一共走了四步

官方确认三球走步!NBA裁判协会:他收球之后一共走了四步

罗说NBA
2026-10-23 05:23:58
使红军惨遭失败的李德离开中国后,最终结局如何?

使红军惨遭失败的李德离开中国后,最终结局如何?

小豫讲故事
2026-09-25 06:00:17
主持人让刘强东用一分钟说服自己在京东购物,刘强东只用了20秒,全场瞬间惊呆了!

主持人让刘强东用一分钟说服自己在京东购物,刘强东只用了20秒,全场瞬间惊呆了!

背包旅行
2026-10-17 09:46:26
中方已做最坏准备,中美一旦爆发战争,东风-61、巨浪-3、福建舰电磁弹射这三张王牌,一张比一张狠,个个都是制衡底牌

中方已做最坏准备,中美一旦爆发战争,东风-61、巨浪-3、福建舰电磁弹射这三张王牌,一张比一张狠,个个都是制衡底牌

林杰论事
2026-09-21 17:50:04
欧美真急眼了,德国采购商卷着铺盖住到中国工厂旁边等货下线。

欧美真急眼了,德国采购商卷着铺盖住到中国工厂旁边等货下线。

荆楚寰宇文枢
2026-10-22 22:55:32
iPhone 20 Pro Max全面曝光!20周年旗舰终于迎来大升级

iPhone 20 Pro Max全面曝光!20周年旗舰终于迎来大升级

时尚的弄潮
2026-10-21 12:32:11
美日拉9国想逼中国低头?俄罗斯突然下场:不是帮忙,是来算账的

美日拉9国想逼中国低头?俄罗斯突然下场:不是帮忙,是来算账的

麓谷隐士
2026-10-23 00:10:04
女人过了50岁,除你丈夫,别的男人靠近你,说白了就一个目的

女人过了50岁,除你丈夫,别的男人靠近你,说白了就一个目的

娱乐洞察点点
2026-10-23 16:53:28
受害者嫌疑人全是中国人:柬警方公布无码人脸,境外丢掉底线?

受害者嫌疑人全是中国人:柬警方公布无码人脸,境外丢掉底线?

兵卒史
2026-10-23 06:29:56
英国小两口在拼多多买了个花园拱门,收到包裹懵逼了!网友:这就是为什么有些人不该获得选举权的原因...

英国小两口在拼多多买了个花园拱门,收到包裹懵逼了!网友:这就是为什么有些人不该获得选举权的原因...

悦居英国
2026-10-16 18:52:20
牵动两岸目光!蒋家 27 人投票 14 比 13 敲定迁葬事宜,蒋友松出资择定溪口摩诃坡,蒋万安受访,仅表示尊重家族长辈的想法!

牵动两岸目光!蒋家 27 人投票 14 比 13 敲定迁葬事宜,蒋友松出资择定溪口摩诃坡,蒋万安受访,仅表示尊重家族长辈的想法!

唠叨说历史
2026-10-23 14:23:07
俄罗斯没打仗前,全世界都认为它是世界第二,4年后西方终于看懂

俄罗斯没打仗前,全世界都认为它是世界第二,4年后西方终于看懂

铭记历史呀
2026-09-27 01:56:12
WTT最新排名炸锅!王楚钦掉到世界第五就慌了?樊振东巴黎世界第四,照样二号种子拿冠军,真正的危机藏在这儿

WTT最新排名炸锅!王楚钦掉到世界第五就慌了?樊振东巴黎世界第四,照样二号种子拿冠军,真正的危机藏在这儿

乒乓网国球汇
2026-10-23 02:56:28
普京终于摊牌:俄乌战争最大搅局者不是美国,而是这个跟俄罗斯斗了200年的老冤家

普京终于摊牌:俄乌战争最大搅局者不是美国,而是这个跟俄罗斯斗了200年的老冤家

z千年历史老号
2026-09-23 17:17:11
上海这一天,何超琼唱《龙的传人》,章子怡又肿了,刘嘉玲太松弛

上海这一天,何超琼唱《龙的传人》,章子怡又肿了,刘嘉玲太松弛

枫尘余往逝
2026-10-20 21:48:38
缺乏远见的卡卡接班人,形似卡卡却神不似,放尤文鸽子自毁前程

缺乏远见的卡卡接班人,形似卡卡却神不似,放尤文鸽子自毁前程

足篮大世界
2026-10-23 18:20:05
金球奖倒计时3天:凯恩赔率降至1.3,伦敦之夜会属于他吗?

金球奖倒计时3天:凯恩赔率降至1.3,伦敦之夜会属于他吗?

智道足球
2026-10-23 15:47:04
2026-10-23 19:51:00
仙工智能
仙工智能
一站式机器人平台
69文章数 5关注度
往期回顾 全部

头条要闻

娶美国媳妇的外卖小哥准备离婚:爱情终究抵不过现实

头条要闻

娶美国媳妇的外卖小哥准备离婚:爱情终究抵不过现实

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

黎纪君晒与刘恺威合照 恋情后首次同框

财经要闻

叫"保障"不叫"保险":租车平台的文字游戏

科技要闻

抢运营商饭碗!马斯克又有大动作

汽车要闻

全球首款增程越野皮卡 长安猎手K70上市19.29万元起

态度原创

房产
教育
健康
数码
艺术

房产要闻

百亩大盘又 +1!攒量超 200 万㎡!江东,要燃起来了!

教育要闻

现在小学生的题目,真的让人有一种无力感

痘痘能根治吗?皮肤科医生说实话

数码要闻

铁威马四盘位NAS F4213发布:最高128TB 硬盘直挂免格式化

艺术要闻

康熙给法国国王列出的“必读书目”,当今可能没人能读完 !

无障碍浏览 进入关怀版