网易首页 > 网易号 > 正文 申请入驻

1.5B小模型在机器人上反杀大块头,面壁智能开源首个具身智能

0
分享至

大多数人都以为,想让机器人变聪明,就得不断堆参数、上大模型,最好动辄几十亿、上百亿。但面壁智能这次反其道而行——用一只仅有1.5B参数的“小钢炮”,在某些考验记忆力的操作任务上,把体量数倍于己的模型远远甩在了身后。这就是7月19日在世界人工智能大会(WAIC 2026)“智在终端 惠及千行”分论坛上正式发布的 MiniCPM-Robot 系列模型,也是面壁智能首次将触角伸进具身智能领域。

发布的产品线很清晰:两款模型,分别瞄准机器人操作和移动跟踪。通用 VLA 模型 RobotManip 负责“手”上的精细活,而 RobotTrack 专攻“脚”上的跟踪导航。两者都坚持了 MiniCPM 家族的端侧基因——小尺寸、高性能、低部署成本,而且一上来就直接开源,全部代码和权重都可以在 GitHub 和 Hugging Face 上找到。


先看负责操作的版本。它的基座是面壁智能刚推出的多模态端侧模型 MiniCPM-V 4.6,继承了该系列在视觉 Token 极致压缩上的看家本领。也就是说,摄像头拍到的画面不会全分辨率送进模型,而是被高度压缩成极少量的特征表示。

这直接带来两个好处:一是单次推理的计算量大幅缩减,二是让模型能保留长达1分钟的具身原生记忆,而额外付出的推理成本几乎跟传统单帧反应式模型持平。这1分钟的记忆有多重要?你可以想象一下:让机器人把几个不同颜色的方块盖住,再按“红-绿-蓝”的顺序一一揭开。如果模型只能处理单帧画面,它根本记不住之前已经揭开过哪些颜色,更无法按正确的顺序操作。

在考验这类上下文记忆能力的 RMBench 测试中,该操作模型拿到了53分,而当前主流模型 π0.5 只有10分,几乎等同于随机。其他主流 VLA 基准上,这款1.5B的小模型也稳居第一梯队,综合性能与 Qwen-VLA、π0.5 等更大体量的模型不相上下,部分指标甚至更优。

推理效率方面同样有看头。在包含60帧历史观测的操作任务中,传统重新计算方式每个决策步需要125 TFLOPs,而面壁的机器人模型借助流式推理仅需3.3 TFLOPs,比 π0.5 在没有任何历史帧输入时的5.0 TFLOPs 还要低。放在 H100、BF16 精度下,单决策步推理时延被压到120毫秒,比 π0.5 的234毫秒快了将近一半。换句话说,它不仅“记得”更多,反应还更快,跑起来的成本反而更低。

再来看主打移动跟踪的那款。这款0.9B参数的端到端视觉指令跟踪模型由面壁智能和南京大学合作研发,最大的卖点是:完全可以在本地断网的环境下跑,不需要云端算力,不依赖外部摄像头或激光雷达,仅凭机器狗自带的摄像头和板载芯片,就能理解文本指令并锁定目标,持续自主跟踪。

团队从单目标跟踪(STT)、动态多目标跟踪(DT)和模糊目标跟踪(AT)三个维度做了评测。在0.9B参数、仅使用监督微调且未做下游强化学习优化的情况下,三项追踪率分别达到89.8、73.4和80.4,全部刷新开源方案的最好成绩,相比 OmTrackVLA 分别提升了7.0、14.6和6.5个百分点。

就算跟某些闭源模型比,比如 TrackVLA++,在单目标跟踪和模糊目标跟踪上的追踪率也分别高出8.8和17.0个百分点,模糊目标跟踪成功率直接拉到58%。这意味着靠高质量数据和端到端训练,轻量级模型完全能在真实场景里获得足够强的指令追踪能力。

数据方面,该跟踪模型还搭了一套自进化数据管线。因为真机采集成本高、长尾场景覆盖不足是业内通病,所以这套管线先通过自动检测加人工复核清洗掉异常轨迹、错误动作等低质量样本,再引入面向具身追踪的 DAgger 策略,让模型在仿真与真机交互中主动暴露薄弱环节,针对快速转向、短时遮挡、多人交叉等复杂情形持续补充高价值数据,形成一个越用越强的闭环。

落实到真机上是什么表现?在宇树 Unitree Go2 机器狗上,团队对完整运行链路做了系统优化,模型在原生本地算力下可以稳定跑到5+ Hz,端到端响应时延约180毫秒。现场 Demo 做了一个很极端的测试:突然拔掉网卡,机器狗依然能依靠本地视觉画面和文本指令持续完成目标识别、跟踪与运动控制。这种能力可以直接迁移到楼宇巡检、人员陪护、园区安防等场景,未来在灾害救援、特种作业等弱网甚至断网的环境里也有想象空间。而且整套部署流程会与模型一同开源,提供一键启动脚本,覆盖模型加载、摄像头接入、指令输入和控制接口,真正做到开箱即用。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“油耗子”越南付出代价,盗挖中国石油数十年,最终付出惨痛代价

“油耗子”越南付出代价,盗挖中国石油数十年,最终付出惨痛代价

孤城落叶
2026-07-21 10:37:54
极目深度 27岁女会计转行助浴师:“三人组合”将失能者放入充气床,全程1个半小时要换三次水,单次收费280元,职业被相亲对象嫌弃仍坚持

极目深度 27岁女会计转行助浴师:“三人组合”将失能者放入充气床,全程1个半小时要换三次水,单次收费280元,职业被相亲对象嫌弃仍坚持

极目新闻
2026-07-21 14:18:00
A股:不必等待了!明天(7月23日),股市或将这样走!

A股:不必等待了!明天(7月23日),股市或将这样走!

财经大拿
2026-07-22 14:10:06
美国在亚洲是屡战屡败,打伊朗战争是不长记性,特朗普果然又求和

美国在亚洲是屡战屡败,打伊朗战争是不长记性,特朗普果然又求和

爱吃醋的猫咪
2026-07-22 20:46:39
东盟晚宴,中俄5国缺席!让菲外长搭好的戏台子,直接无戏可唱

东盟晚宴,中俄5国缺席!让菲外长搭好的戏台子,直接无戏可唱

青青衫书生
2026-07-22 18:08:09
40℃高温天洒水车集体消失?网友调侃放高温假、真相打脸无数人

40℃高温天洒水车集体消失?网友调侃放高温假、真相打脸无数人

南方健哥
2026-07-21 23:32:35
王毅出席东盟外长会期间与鲁比奥会面

王毅出席东盟外长会期间与鲁比奥会面

澎湃新闻
2026-07-22 19:12:27
BBA价格崩了,国产电车也没赢麻

BBA价格崩了,国产电车也没赢麻

老凤说财经
2026-07-21 17:05:25
专家分析:彭水山体崩塌为何如此猛烈?

专家分析:彭水山体崩塌为何如此猛烈?

大风新闻
2026-07-18 19:58:07
实锤了!张雪首款踏板车正式官宣,续航300km、车重仅170kg

实锤了!张雪首款踏板车正式官宣,续航300km、车重仅170kg

沙雕小琳琳
2026-07-21 01:33:36
刚刚,无锡天空传来巨响!

刚刚,无锡天空传来巨响!

江南晚报
2026-07-22 15:44:36
台湾军情局六处副处长庞大为,潜入广州秘密策反解放军少将,亲手搅乱96年台海军演,这位两岸谍战第一人,晚年迎来了什么结局?

台湾军情局六处副处长庞大为,潜入广州秘密策反解放军少将,亲手搅乱96年台海军演,这位两岸谍战第一人,晚年迎来了什么结局?

磊子讲史
2026-07-15 15:39:34
王志文:真正的富人,从来不培养人|没有富过、没有上当的人,才以为人是可以培养的

王志文:真正的富人,从来不培养人|没有富过、没有上当的人,才以为人是可以培养的

杏花烟雨江南的碧园
2026-07-22 14:15:03
8岁男孩跟随父亲野泳时不慎越游越远,最终沉入水底!专家痛心:别再“倒挂控水”了!这240秒很关键

8岁男孩跟随父亲野泳时不慎越游越远,最终沉入水底!专家痛心:别再“倒挂控水”了!这240秒很关键

环球网资讯
2026-07-22 09:56:04
伊朗导弹冲向地面,突然机动无法拦截:美军逃跑,不想原地等死

伊朗导弹冲向地面,突然机动无法拦截:美军逃跑,不想原地等死

他想要很多很多的梦
2026-07-21 15:32:24
前国际大法官亲自下场!南海仲裁法庭从未参与,全是政治闹剧

前国际大法官亲自下场!南海仲裁法庭从未参与,全是政治闹剧

时光漫游志
2026-07-21 08:14:45
消费降级实锤了?华山游客锐减,一家三口光门票索道就花1500

消费降级实锤了?华山游客锐减,一家三口光门票索道就花1500

离离言几许
2026-07-21 04:57:18
6艘美国军舰撤出中东,不管伊朗直奔南海,美媒:要阻止中国行动

6艘美国军舰撤出中东,不管伊朗直奔南海,美媒:要阻止中国行动

闻识
2026-07-22 10:56:49
不愧是张泉灵,她一针见血地问冉莹颖:"等债还完了,经济宽裕了,你还会想离婚吗?"

不愧是张泉灵,她一针见血地问冉莹颖:"等债还完了,经济宽裕了,你还会想离婚吗?"

童颜美学馆
2026-07-21 17:07:29
张柏芝自曝:3年流4次,近况曝光已确诊,谢霆锋当初真没说错!

张柏芝自曝:3年流4次,近况曝光已确诊,谢霆锋当初真没说错!

你是我心中最美星空
2026-07-21 21:35:19
2026-07-22 21:27:00
硅屿手记
硅屿手记
有态度网友ytd
390文章数 53关注度
往期回顾 全部

科技要闻

马斯克看笑了:谷歌什么都有 偏偏没最强AI

头条要闻

女生高考后和妈妈"扛砖赚学费"被质疑摆拍 当事人发声

头条要闻

女生高考后和妈妈"扛砖赚学费"被质疑摆拍 当事人发声

体育要闻

阿根廷的亚军:单核足球的极限?

娱乐要闻

47岁汤唯宣布二胎产子 大女儿10岁

财经要闻

宜家出售八城"蓝盒子" 30年大店逻辑生变

汽车要闻

上汽贾健旭谈汽车全球化:出海要合规 欧洲人只爱小车是误解

态度原创

本地
手机
房产
公开课
军事航空

本地新闻

杭州诗意路名,自带氛围感

手机要闻

2000 元手机怎么选?避开三大套路,看完不再盲目跟风交学费

房产要闻

冲刺500亿美元IPO,海南又要迎来超级巨头!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

乌克兰高层爆发严重内斗 泽连斯基撤换"屠夫"总司令

无障碍浏览 进入关怀版