网易首页 > 网易号 > 正文 申请入驻

家庭机器人浇花偏差:RoboTracer三维技术破局

0
分享至

你让家里的服务机器人给阳台的花浇水,特意嘱咐“从左到右,每个花盆上方1-5厘米处浇”。

结果机器人要么把水浇到花盆外,要么离花太近溅一身泥这场景是不是很熟悉?家庭服务机器人走进生活的最大拦路虎,其实是“看不懂”真实空间里的各种规矩。



日常生活里的空间要求远比想象中复杂。

就拿浇花来说,“从左到右”是定性的位置约束,“1-5厘米”是定量的距离限制,机器人得同时搞定这两件事才能不出错。

家庭环境本来就乱。



遥控器可能压在杂志下,拖鞋东一只西一只,机器人面对的不是实验室里整齐的货架,而是随时变化的“随机场景”。

传统模型直接输出(x,y,z)坐标,就像蒙着眼睛扔飞镖,训练难、精度低,更别提理解“上方”“旁边”这些模糊但常用的空间词了。

正是这些痛点,催生出了RoboTracer。



它的核心任务很明确,生成带空间约束的3D位置序列,也就是“空间轨迹”,让机器人知道每一步该往哪动、动多远。

RoboTracer的“三维智慧”,如何让机器人“看懂”真实空间

RoboTracer的聪明之处,先从“看”开始。

本来想直接让模型学3D坐标,后来发现分开处理更高效,先算图像上的像素位置(u,v),再结合深度信息(d),最后用相机参数换算成真实世界的3D坐标。



这种解耦设计让训练难度降了不少,精度反而提上去了。

光看懂还不够,还得有“尺度感”。

你说“5厘米”,机器人得知道这到底多长。

RoboTracer里有个“尺度解码器”,专门把抽象的特征转换成具体数值。

比如看到一个杯子,它能估算出高度,再结合指令里的“5厘米”,就知道该离多远操作。

这种对“绝对尺度”的理解,是之前模型最缺的能力。



训练方法也有讲究。

团队分了两步走,先通过SFT(监督微调)让模型打好基础,学会单步的空间理解,比如“哪个物体在左边”“距离多远”,再用RFT(强化微调)加过程奖励,监督中间每一步的推理质量。

就像教孩子搭积木,不光看结果对不对,还要纠正每一步的摆放位置,这样复杂任务也能稳稳完成。

实际测试里,RoboTracer的表现挺亮眼。

在空间理解相关任务里,SFT训练后平均成功率接近八成,刷新了现有水平,加上RFT后,在专门的TraceSpatial-Bench评测中,准确率比Gemini-2.5-Pro高出36%。



最直观的是对比视频,别的模型生成的轨迹要么飘在半空,要么撞到花盆,而RoboTracer规划的路线能精准停在花盆上方5厘米,从左到右挨个浇过去,稳得像老手。

更重要的是它“开箱即用”。

不管是UR5机械臂还是G1仿人机器人,都能直接集成这个模型。

在开放世界测试里,只有RoboTracer能完成“先把书放到书架第三层,再把杯子放在书旁边10厘米处”这种多步空间任务。



家庭服务机器人市场需求一直很大,但技术总差临门一脚。

这次RoboTracer的突破,不是简单提升性能,而是找到了一种让机器人“理解真实空间”的新范式。

未来它不光能浇花、收纳,说不定还能帮老人取药、给孩子整理书包只要涉及空间操作,它都有可能派上用场。

当然,这只是开始。



模型还需要在更多复杂场景里打磨,比如应对光线变化、透明物体这些难题。

但至少现在,我们看到了服务机器人真正走进家庭的希望。

毕竟,能“看懂”空间的机器人,才算是真正有了“动手能力”。



声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
胡杏儿哈尔滨旅游,零下20度穿5层衣服,三个儿子羽绒服到脚脖子

胡杏儿哈尔滨旅游,零下20度穿5层衣服,三个儿子羽绒服到脚脖子

小咪侃娱圈
2026-01-07 09:15:10
流亡一年后,阿萨德已成“透明人”,连约普京吃顿饭都做不到

流亡一年后,阿萨德已成“透明人”,连约普京吃顿饭都做不到

生活新鲜市
2026-01-06 13:05:26
回国了我才敢说:澳大利亚,是我去过的所有国家中,最被看轻的!

回国了我才敢说:澳大利亚,是我去过的所有国家中,最被看轻的!

冬天来旅游
2026-01-06 11:52:59
中俄刚说打通图们江,第一个跳出来反对的,一点不让人意外

中俄刚说打通图们江,第一个跳出来反对的,一点不让人意外

闻香阁
2026-01-04 11:16:35
31岁短道速滑运动员武大靖自宣退役,曾获两枚冬奥会金牌

31岁短道速滑运动员武大靖自宣退役,曾获两枚冬奥会金牌

懂球帝
2026-01-06 20:22:16
今日金价一夜突变?1月6日黄金调整后,全国珠宝店,黄金最新售价

今日金价一夜突变?1月6日黄金调整后,全国珠宝店,黄金最新售价

小蜜情感说
2026-01-07 00:19:46
苏富比5.9亿“稀世粉钻”惨遭流拍,西方巨头破防:河南负全责!

苏富比5.9亿“稀世粉钻”惨遭流拍,西方巨头破防:河南负全责!

诗意世界
2025-12-31 17:59:26
大反转,曼联新帅大热曝光!二次回归,打脸高层,白费10亿转会费

大反转,曼联新帅大热曝光!二次回归,打脸高层,白费10亿转会费

阿泰希特
2026-01-07 09:03:09
老蒋曾说:亡于日本为亡国奴,亡于共产党,则为奴亦不可得

老蒋曾说:亡于日本为亡国奴,亡于共产党,则为奴亦不可得

老范谈史
2026-01-05 21:19:06
出嫁前3天彩礼涨到28.8万后续:男方坚持退婚,女子曝光已社死

出嫁前3天彩礼涨到28.8万后续:男方坚持退婚,女子曝光已社死

千言娱乐记
2025-12-13 18:34:13
日军为何攻不进延安?一位大将透露:在毛主席面前日本人还嫩着呢

日军为何攻不进延安?一位大将透露:在毛主席面前日本人还嫩着呢

老范谈史
2025-11-28 23:40:12
日本预测,未来20年亚洲最发达的“四座城市”,我国几座榜上有名

日本预测,未来20年亚洲最发达的“四座城市”,我国几座榜上有名

牛牛叨史
2024-07-19 23:32:16
疑点太多!南博陈超当年被立刻枪决,更像是为了掩盖什么

疑点太多!南博陈超当年被立刻枪决,更像是为了掩盖什么

天气观察站
2025-12-30 19:10:01
吃相难看!海南房子到手后,何树成继续喊话赵本山:就让你膈应我

吃相难看!海南房子到手后,何树成继续喊话赵本山:就让你膈应我

梁瞠侃世界
2026-01-05 22:09:44
房产证上的人去世了,继承别再花大几千的公证费,80块钱就能搞定

房产证上的人去世了,继承别再花大几千的公证费,80块钱就能搞定

室内设计师有料儿
2025-12-07 16:05:28
人一定要大量读书:否则你弱到连说话、吵架都不会

人一定要大量读书:否则你弱到连说话、吵架都不会

木言观
2026-01-04 15:05:01
美国不敢对中国开战?英国学者一语道破:中国不止核武器一个底牌

美国不敢对中国开战?英国学者一语道破:中国不止核武器一个底牌

谛听骨语本尊
2025-11-30 16:05:50
韩国大胆提议:建设首尔至北京高铁,但有一个条件,中方须先答应

韩国大胆提议:建设首尔至北京高铁,但有一个条件,中方须先答应

坠入二次元的海洋
2026-01-06 15:57:46
意外!国安队刚往中超冬窗放了两条锋线大鱼,就相继被新东家抢走

意外!国安队刚往中超冬窗放了两条锋线大鱼,就相继被新东家抢走

振刚说足球
2026-01-07 10:08:58
刺激夜:尤文3-0,罗马2-0,越南2-0,拜仁5-0,穆帅前东家2-0进决赛

刺激夜:尤文3-0,罗马2-0,越南2-0,拜仁5-0,穆帅前东家2-0进决赛

侧身凌空斩
2026-01-07 06:05:41
2026-01-07 11:15:00
粉红小碎花
粉红小碎花
粉红小碎花
164文章数 75关注度
往期回顾 全部

科技要闻

马斯克杀疯了!xAI官宣200亿美元融资

头条要闻

李文荣被公诉:泄露尚未公开企业重组信息 搞权色交易

头条要闻

李文荣被公诉:泄露尚未公开企业重组信息 搞权色交易

体育要闻

全明星次轮票数:东契奇票王 詹皇超KD升西部第8

娱乐要闻

2026年央视春晚彩排:沈腾确定回归

财经要闻

茅台为何要和分销商彻底说拜拜?

汽车要闻

摩登出街潮品 实拍奇瑞QQ冰淇淋女王版

态度原创

游戏
房产
教育
旅游
军事航空

小团体闹麻了!《黎明行者》称本作吸血鬼会组团争斗

房产要闻

海珠双冠王!中交天翠以强兑现力+生活温度,筑就长期主义产品

教育要闻

定了!多所高校发布2026保送新政

旅游要闻

阿勒泰海上魔鬼城:冰雪雕琢的奇幻世界

军事要闻

美称对“占领”委内瑞拉保留选择权

无障碍浏览 进入关怀版