网易首页 > 网易号 > 正文 申请入驻

ICRA 2026最佳论文奖,千寻智能首席科学家、清华高阳团队FP3入围

0
分享至

原文作者:谭梓馨

原文链接:https://mp.weixin.qq.com/s/llcXE2be4oNWItL_0ydVZw

2026年IEEE国际机器人与自动化会议(IEEE ICRA 2026)是机器人与自动化领域的顶级学术盛会,于6月1日至5日在奥地利维也纳举办。今年,FP3、HITTER等多篇华人团队论文入围最佳论文奖提名,头部科技此前曾报道过HITTER,今天来看另一篇研究FP3。



FP3论文的导师之一高阳是清华大学跨学科信息科学研究院(IIIS)的助理教授,同时他也是国内具身独角兽千寻智能(Spirit AI)的联创兼首席科学家。下面,一起来看看FP3做了哪些创新工作。三维基座带来的改进基于海量多任务数据预训练的基座大模型在机器人领域展现出巨大潜力,但绝大多数机器人基础策略模型仅采用二维图像作为输入观测,缺失三维几何信息,而三维几何是机器人感知、理解真实三维空间的关键。概括来说,FP3是一个面向机器人操作的大规模三维基座策略模型。
该模型参数大小为1.3B,基于可规模化的扩散Transformer架构搭建,依托6万条含点云观测的运动轨迹完成预训练,凭借特有模型结构与多元化预训练数据,FP3可快速微调适配各类下游任务,泛化性能优异。真机实测表明:仅需80组人工示教样本,FP3即可在包含全新未知物体的陌生场景中习得新任务,性能大幅领先现有机器人基座模型。在自建的多项新任务数据集上验证FP3高效微调与强泛化特性,结果显示:仅使用单卡、两小时微调,相较主流基线,同场景性能平均提升60%,开放未知场景性能平均提升80%。性能对比表现突出FP3的在架构中设计了一个编码器-解码器扩散Transformer网络,首先对多模态输入进行编码,包括3D点云、语言和机器人本体感受状态,然后对动作进行去噪。


研究人员与业内其他机器人控制策略进行了对比,域内实验结果显示,单场景仅10条示教样本条件下:DP、DP3仅能勉强完成简单任务,多数场景成功率不足50%,在倒水这类高难度任务上基本失效;OpenVLA整体各项任务表现糟糕,根源在于缺少连续动作块预测机制。


依托预训练与三维点云表征,FP3全部任务成功率突破90%。从实操现象来看,基线算法失败多源于动作精度缺陷:夹取时定位偏差推飞物件、倒水时瓶口对偏等;而FP3凭借大参数量与海量预训练,可精准拟合复杂目标动作,输出轨迹更平滑、控制精度更高,显著优于对比算法。


将机械臂更换至全新环境、使用从未见过的物体开展零样本测试,不含预训练的所有基线策略普遍无法识别目标物体,任务成功率近乎归零。

反观经过预训练的FP3极少出现识别失效,全场景平均成功率超80%,全面碾压对照组。

研究认为优异性能来自两点:一是大规模预训练覆盖海量场景与物件,大幅提升策略鲁棒性;二是点云输入可精准捕获三维几何特征,是实现跨域泛化的关键。


指令跟随测试结果显示,在初始环境完全一致的条件下,使用多条不同文本指令测试FP3与基线策略,FP3可精准依照指令执行对应任务,并非单纯死记训练数据分布。

研究人员在论文中表示,FP3虽作为基座策略模型表现优异,但仍存在若干短板:

第一,FP3下游微调效率与泛化能力突出,但基座原生零样本性能偏弱,诱因大概率是预训练所用DROID数据集体量不及OXE等二维机器人数据集,后续可构建规模更大的三维机器人数据集用于预训练。

第二,FP3仅依靠CLIP嵌入实现语言条件接入,难以表征复杂动态语义;后续可将本扩散架构FP3与视觉大模型VLM融合,搭建类似π0的视觉-语言-动作(VLA)模型;

第三,当前FP3未复用DINOV2、SigLIP等成熟预训练二维视觉编码器,融合三维点云特征与二维图像特征、或将二维特征升维至三维空间具备巨大优化空间,相关研究留作未来工作。


具身独角兽激烈竞逐

FP3之外,高阳所在的千寻智能今天也官宣了两大进展。

一方面,其自研具身基座模型Spirit v1.6在具身基准测试平台RoboArena中成功登顶,性能超过英伟达Cosmos3与Physical Intelligence Pi0.5,成为首个登顶的中国具身模型。


另一方面,该公司宣布新获15亿元A+轮融资,从2月份至今融资近50亿再次刷新行业纪录。

千寻智能在官宣中表示2026年将积累100万小时级真实世界交互数据的阶段性沉淀,涵盖丰富的长尾复杂场景与多模态操作样本,构筑核心护城河。


在另一份榜单具身智能大规模真机评测平台RoboChallenge的Table30系列任务测试中,千寻智能此前发布的Spirit v1.5目前排名第四,排名第一的是星动纪元Era0模型,其次是原力灵机的DM0和极佳视界的GigaBrain-0.1,模型排位变换之间也见证了中国具身智能创业赛道竞争之激烈。

今年以来,估值超百亿的具身独角兽不断扩容,除了上述几家公司,赛道中还有银河通用、星海图、智元、智平方、自变量、星尘智能、灵心巧手、帕西尼感知等等,即将IPO的宇树也计划将募资重点投入到具身智能大模型。独角兽们的技术竞逐,正加速机器人行业拐点的到来,推动中国成为全球具身智能落地的核心市场。

雷峰网

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
刘翔恩师现状:守在上海,两省都发工资,每日2包烟,71岁仍硬朗

刘翔恩师现状:守在上海,两省都发工资,每日2包烟,71岁仍硬朗

皮皮电影
2026-07-13 16:40:36
5岁女儿也受到死亡威胁!美媒:哥伦比亚球员坎帕斯目前已下落不明

5岁女儿也受到死亡威胁!美媒:哥伦比亚球员坎帕斯目前已下落不明

新杀猪的秀才
2026-07-13 01:49:32
特朗普称伊朗新任最高领袖“九成已死”,伊朗4个月未公开真人影像

特朗普称伊朗新任最高领袖“九成已死”,伊朗4个月未公开真人影像

桂系007
2026-07-13 22:31:12
最狠的营销是把自己骂上热搜!周星驰功夫女足反向宣发有多狠?

最狠的营销是把自己骂上热搜!周星驰功夫女足反向宣发有多狠?

数字营销市场
2026-07-13 14:49:19
目光犀利、令人敬畏的朝鲜首席大法官

目光犀利、令人敬畏的朝鲜首席大法官

IN朝鲜
2026-07-13 14:20:39
豪门真难进!华晨宇给孩子做2次亲子鉴定,彻底断了张碧晨豪门梦

豪门真难进!华晨宇给孩子做2次亲子鉴定,彻底断了张碧晨豪门梦

八卦王者
2026-07-13 13:18:19
朱珠晒比基尼度假照,生娃后身材依旧能打,这才是高级的性感!

朱珠晒比基尼度假照,生娃后身材依旧能打,这才是高级的性感!

枫尘余往逝
2026-07-13 12:17:52
湖南长沙一已婚男子出轨邻栋女子,婆婆为了孙子儿媳上门硬刚小三,女子:“我就是要你儿子”;原配:将通过法律途径维权

湖南长沙一已婚男子出轨邻栋女子,婆婆为了孙子儿媳上门硬刚小三,女子:“我就是要你儿子”;原配:将通过法律途径维权

扬子晚报
2026-07-13 17:26:32
A股:紧急提醒2.5亿股民!从明天7月14日起,A股或迎C浪调整行情?

A股:紧急提醒2.5亿股民!从明天7月14日起,A股或迎C浪调整行情?

趋势清风侠
2026-07-13 15:49:20
伊朗波斯湾海峡管理局:霍尔木兹海峡已不可通行

伊朗波斯湾海峡管理局:霍尔木兹海峡已不可通行

界面新闻
2026-07-13 20:37:47
29分钟32分6篮板,三分8中6,21号秀打服状元,奇才保底东决?

29分钟32分6篮板,三分8中6,21号秀打服状元,奇才保底东决?

宝哥精彩赛事
2026-07-13 14:12:45
“早入伏,凉飕飕;晚入伏,热死牛”,7月15日入伏,算早还是晚

“早入伏,凉飕飕;晚入伏,热死牛”,7月15日入伏,算早还是晚

牛锅巴小钒
2026-07-11 06:37:54
为坚持讽刺,得罪韩国影帝也不在乎!这才是周星驰真正的硬气

为坚持讽刺,得罪韩国影帝也不在乎!这才是周星驰真正的硬气

小椰的奶奶
2026-07-13 16:51:52
队报:法国波士顿下榻酒店成打卡点,早上能看到科纳特喂鸭子

队报:法国波士顿下榻酒店成打卡点,早上能看到科纳特喂鸭子

懂球帝
2026-07-13 19:34:45
美媒:格雷厄姆之死让共和党“陷入混乱”

美媒:格雷厄姆之死让共和党“陷入混乱”

参考消息
2026-07-13 16:44:03
撕开金黄酥皮,全是科技与狠活!你当下午茶的蛋挞,正在悄悄掏空你的血管

撕开金黄酥皮,全是科技与狠活!你当下午茶的蛋挞,正在悄悄掏空你的血管

富贵说
2026-07-10 13:10:31
遭莱曼批评?阿坎吉:这让我震惊,尤其是考虑到德国队目前的处境

遭莱曼批评?阿坎吉:这让我震惊,尤其是考虑到德国队目前的处境

懂球帝
2026-07-13 17:48:08
比砒霜还毒!一盘凉拌黄瓜致男子肝衰竭,医生建议:出现这种情况直接扔掉

比砒霜还毒!一盘凉拌黄瓜致男子肝衰竭,医生建议:出现这种情况直接扔掉

大象新闻
2026-07-13 08:02:10
被火箭放弃的阿隆霍勒迪 为何无人问津 火箭为何要放弃他

被火箭放弃的阿隆霍勒迪 为何无人问津 火箭为何要放弃他

大话火箭队
2026-07-13 20:54:41
一位无神论教授在普陀山跪拜后,回家途中遭遇的事,让他当场落泪

一位无神论教授在普陀山跪拜后,回家途中遭遇的事,让他当场落泪

千秋文化
2026-07-08 19:27:42
2026-07-13 23:19:00
雷峰网 incentive-icons
雷峰网
关注智能与未来!
70100文章数 656174关注度
往期回顾 全部

科技要闻

OpenAI与Anthropic互掐,最强AI也怕你不用

头条要闻

外媒:特朗普鼓励泽连斯基对俄发动新进攻

头条要闻

外媒:特朗普鼓励泽连斯基对俄发动新进攻

体育要闻

世界杯月赚1.7亿,51岁的他仍是顶流

娱乐要闻

具俊晔“深情人设”崩塌,遗产瓜开撕

财经要闻

SK海力士暴跌15%原因找到了?

汽车要闻

小米澎程N90 Max工信部信息曝光 全尺寸旗舰 露营版首秀

态度原创

游戏
数码
时尚
本地
健康

《巫师1》重制版隐藏陷阱 更大世界会破坏叙事节奏

数码要闻

一次洗白泛黄衣物!米家洗衣机Pro超电解智投滚筒10kg开售:2294元

伊姐周日热推:电视剧《醉梦》;电影《小黄人与大怪兽》......

本地新闻

打的直达拉萨,一条视频拿下五十万奖金

这几类人离中风最近!有你吗?

无障碍浏览 进入关怀版