网易首页 > 网易号 > 正文 申请入驻

谷歌最新机器人模型深夜曝光!能看仪表盘干活,成功率狂飙300%

0
分享至



联手波士顿动力,谷歌给机器人装上会读表的脑子。

作者 |许丽思

编辑 |漠影

机器人前瞻4月15日报道,昨天深夜,谷歌推出 Gemini Robotics-ER 1.6。

去年9月,谷歌发布Gemini Robotics-ER 1.5。时隔半年多,谷歌机器人模型终于迎来一次大升级。

Gemini Robotics-ER 1.6能够让机器人以前所未有的精度理解周围环境,在多项关键推理能力上进行了升级,包括视觉与空间理解、任务规划以及任务完成判断。它可以作为机器人的高层推理模型,原生调用Google Search、VLA以及其他第三方自定义功能,自主完成复杂作业任务。

谷歌提到,与Gemini Robotics-ER 1.5和Gemini 3.0 Flash相比,Gemini Robotics-ER 1.6在空间与物理推理能力上都有明显提升,尤其是在点位定位、计数和任务成功判断等方面。

与此同时,Gemini Robotics-ER 1.6还新增了一项能力——仪表读数,这使机器人能够读取复杂的压力表和液位观察窗等设备。该功能是谷歌与波士顿动力合作开发的,特别适合用于高精度工业任务。

如图,在指向与计数任务上,Gemini Robotics-ER 1.6的成功率为80%;在单视角成功检测任务中,其成功率为90%;在多视角成功检测任务中,其成功率为84%;在结合Agentic Vision的仪表读数任务中,其成功率达到93%,相比Gemini Robotics-ER 1.523%的成功率,飙升了300%。


即日起,开发者就可以通过Gemini API和Google AI Studio使用Gemini Robotics-ER 1.6。

01.

升级点位定位和多视角推理能力,

提升机器人干活自主性

点位定位是具身推理模型的一项基础能力,可以让模型实现不同类型的推理任务,包括空间推理、关系逻辑、运动推理、约束理解等。

Gemini Robotics-ER 1.6可以把点位作为中间推理步骤,来完成更复杂的任务。它可以先通过点位来计数图像中的物体,或者通过识别关键位置,再结合数学计算提高尺寸或距离估算的准确性。

如图,Gemini Robotics-ER 1.6知道什么时候该指出目标、什么时候不该乱指。它能正确识别图中有2把锤子、1把剪刀、1把油漆刷、6把钳子,以及一组园艺工具。对于图中并不存在的手推车和电钻,它也不会错误标注。

相比之下,Gemini Robotics-ER 1.5就没法正确识别锤子和油漆刷的数量,完全漏掉了剪刀,还会产生幻觉,指出了并不存在的手推车,钳子的定位精度也较差。

Gemini 3.0 Flash的表现已经比较接近Gemini Robotics-ER 1.6,但在钳子的处理上还不够理想。


Gemini Robotics-ER 1.6还提升了多视角推理能力,能够更好地理解多路摄像头画面以及它们之间的关系,即便在动态变化或存在遮挡的环境中,也能保持较高的判断能力。

Gemini Robotics-ER 1.6可以综合多个摄像头视角的信息,判断“把蓝色笔放进黑色笔筒”这一任务是否已经完成。

像这样的任务成功判断(Success Detection)是机器人实现自主性的关键一环,因为它决定了机器人在执行任务过程中,是应该重新尝试一次,还是可以进入下一步。


02.

仪表识别成功率达93%,

机器人可执行设备巡检任务

工业厂区遍布温度计、压力表、化学液位观测窗等各类精密仪器,需要长期持续监测。想要解决真实工业场景中这些复杂难题,就必须让机器人学会仪器读数识别。

Gemini Robotics-ER 1.6让机器人能够读懂多种仪表,包括圆形压力表、垂直液位计以及现代数字读数设备。

读取仪表并不是简单的识别任务,而是一个复杂的视觉推理过程。系统必须精确感知多种视觉元素,例如指针、液位、容器边界、刻度线等,并理解它们之间的关系。

液位观察窗为例,模型需要结合相机拍摄角度带来的畸变,估算液体实际填充了多少。对于压力表,系统还需要读取并理解文字标注的单位;有些表盘甚至有多根指针,对应不同的小数位,必须综合后才能得出正确读数。

依托仪器读数识别与升级后的任务推理能力,波士顿动力的Spot四足机器人可以实现全自主巡检,独立感知、理解并应对各类工业实景挑战。


Gemini Robotics-ER 1.6之所以能够实现高精度仪表读数,是因为它使用了Agentic Vision技术,也就是把视觉推理与代码执行结合起来。

具体来说,模型会先采取一系列中间步骤:比如先放大图像,更清楚地观察仪表细节;再通过点位标注和代码执行估算比例与区间,最终得到精确读数,并结合世界知识理解其含义。


在仪表读数任务上,四种模型的成功率依次提升:Gemini Robotics-ER 1.5成功率为23%;Gemini 3.0 Flash成功率为67%;Gemini Robotics-ER 1.6成功率为86%;Gemini Robotics-ER 1.6(启用 agentic vision)成功率为93%。


03.

结语:机器人走入现实应用,

还需要具备足够安全性

在机器人规模化落地民用与工业场景的当下,安全性早已和智能化、自主性同等重要,成为制约具身智能落地的核心门槛。

谷歌称,Gemini Robotics-ER 1.6不仅在环境感知、空间推理、工业仪表识别等核心能力全面进阶,更完成了安全能力的系统性升级,也是其目前安全表现最优的机器人专用模型。

在对抗性空间推理任务中,Gemini Robotics-ER 1.6对Gemini安全策略的遵守程度优于此前所有版本。同时,Gemini Robotics-ER 1.6在遵守物理安全约束方面也有明显提升。

比如,在涉及点位输出的任务中,它能更安全地判断哪些物体可以被机械夹爪抓取,哪些不能碰,从而满足夹持器限制或材料约束,比如“不要处理液体”“不要抓取超过20公斤的物体”等。

谷歌还测试了模型在文本和视频场景中识别安全隐患的能力,测试依据来自真实世界的伤害事故报告。在这些任务中,Gemini Robotics-ER 1.6相比Gemini 3.0 Flash也有所提升:文本场景提升6%,视频场景提升10%,说明它在识别潜在伤害风险方面更加准确。


对具身智能而言,真正决定机器人能否走出实验室、走进大规模真实场景的,除了更强的大脑,还需要每一次感知、判断与动作背后,都足够安全可靠。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
国民党内讧,前高层冲闯党部斥责郑丽文:你不配当主席,是个卒子

国民党内讧,前高层冲闯党部斥责郑丽文:你不配当主席,是个卒子

面包夹知识
2025-12-31 23:04:14
彻底凉凉!东契奇伤情报告出炉,帕金斯放狠话:老詹赢火箭是GOAT

彻底凉凉!东契奇伤情报告出炉,帕金斯放狠话:老詹赢火箭是GOAT

篮球看比赛
2026-04-16 09:50:19
勇士本赛季最热血的一场比赛,何其“勇”!

勇士本赛季最热血的一场比赛,何其“勇”!

体育新角度
2026-04-16 18:05:43
打了45天,伊朗终于发现最大敌人不是美国,不是以色列,而是他们

打了45天,伊朗终于发现最大敌人不是美国,不是以色列,而是他们

面包夹知识
2026-04-15 15:32:31
出发英国,刘国梁哥哥发声,正式上任,亮相新岗位,和国乒竞争

出发英国,刘国梁哥哥发声,正式上任,亮相新岗位,和国乒竞争

懂球社
2026-04-14 15:13:46
油价调整:注意,预计下调580元/吨,油价价继续跌!

油价调整:注意,预计下调580元/吨,油价价继续跌!

金投网
2026-04-16 11:07:49
大难临头各自飞?时隔9月相见,尹锡悦紧盯爱妻,为何被冷眼相对

大难临头各自飞?时隔9月相见,尹锡悦紧盯爱妻,为何被冷眼相对

军闻新大门
2026-04-16 05:19:26
52岁朴树近况:无儿无女,没钱没房,成了要钱不要命的“疯子”

52岁朴树近况:无儿无女,没钱没房,成了要钱不要命的“疯子”

流云随风去远方
2026-04-14 12:22:59
一石二鸟!皇马中场红牌坑死球队也坑死国家队老大 今夏必走人

一石二鸟!皇马中场红牌坑死球队也坑死国家队老大 今夏必走人

雪狼侃体育
2026-04-16 16:54:03
她陷入了政治漩涡

她陷入了政治漩涡

徐静波静说日本
2026-04-15 08:08:07
女孩在行李箱上写字,全网狂赞:这才是中国人刻在骨子里的浪漫!

女孩在行李箱上写字,全网狂赞:这才是中国人刻在骨子里的浪漫!

中国艺术家
2026-04-14 05:23:31
卡瓦哈尔情绪失控:“都是你的错”

卡瓦哈尔情绪失控:“都是你的错”

绿茵情报局
2026-04-16 15:20:32
咖啡再次被关注!医生发现:高血脂患者常喝咖啡,或出现这些变化

咖啡再次被关注!医生发现:高血脂患者常喝咖啡,或出现这些变化

岐黄传人孙大夫
2026-04-16 16:30:03
“天生的坏种,典型的伥鬼”,小学生地铁站一个动作,被全网讨伐

“天生的坏种,典型的伥鬼”,小学生地铁站一个动作,被全网讨伐

妍妍教育日记
2026-04-16 09:10:09
38人遇难!最新确认:客机坠毁系遭俄罗斯误击

38人遇难!最新确认:客机坠毁系遭俄罗斯误击

扬子晚报
2026-04-16 14:40:38
钱赚够了,名声没了,谢娜开演唱会迎来全网骂潮,刘烨当初没说谎

钱赚够了,名声没了,谢娜开演唱会迎来全网骂潮,刘烨当初没说谎

洲洲影视娱评
2026-04-15 23:09:10
夫妻二人同时被带走调查,二人深耕辽宁金融保险行业数十年

夫妻二人同时被带走调查,二人深耕辽宁金融保险行业数十年

元芳有看法
2026-04-15 21:48:28
“运-10”总体设计负责人程不时逝世

“运-10”总体设计负责人程不时逝世

第一财经资讯
2026-04-16 15:11:55
金正恩表态了!

金正恩表态了!

西楼饮月
2026-04-14 21:36:14
敬酒不吃吃罚酒!中国警告两大航运公司,立即停止巴拿马港口运营

敬酒不吃吃罚酒!中国警告两大航运公司,立即停止巴拿马港口运营

阿龙聊军事
2026-04-16 05:09:34
2026-04-16 18:28:49
机器人前瞻
机器人前瞻
专注于机器人报道的媒体
477文章数 10关注度
往期回顾 全部

科技要闻

赵明:智驾之战,看谁在大模型上更高效

头条要闻

东北男子投诉公交提前发车丢工作 单位被施压将其解雇

头条要闻

东北男子投诉公交提前发车丢工作 单位被施压将其解雇

体育要闻

很快,亚洲篮球要有自己的NCAA了?

娱乐要闻

丝芭传媒创始人王子杰去世,享年63岁

财经要闻

一季度GDP,5.0%!

汽车要闻

空间大五个乘客都满意?体验岚图泰山X8

态度原创

房产
教育
旅游
本地
家居

房产要闻

人人人人!封关后首届消博会,挤爆了!

教育要闻

“交叉深造”“反向深造”时代,来了?

旅游要闻

青山染雪白鹃梅开 又见秦岭春日花海

本地新闻

12吨巧克力有难,全网化身超级侦探添乱

家居要闻

智能舒适 简约风尚

无障碍浏览 进入关怀版