网易首页 > 网易号 > 正文 申请入驻

机器人视频标注一小时 88.5 美元,英伟达开源 Flora 把它压到 0.72 美元

0
分享至

随手先关注,不错过每日AI热讯速递

①

给机器人录像打标签,一直是具身智能最贵的一环。10 月 25 日,英伟达 GEAR 研究实验室开源了Flora,一套专门做这件事的模型套件,三份权重已经上线 Hugging Face[1][2]。

按英伟达自己的测算,标注一小时机器人视频要约0.72 美元;同样的活交给GPT-6 Astra,按同一套假设测算要88.50 美元,两者差出约125 倍[1]。

这套系统不是演示品。英伟达说它已经在 GR00T 模型训练中实际运行,每天在512 块 GB300上标注20 万小时视频[2]。

Flora由三个微调过的Qwen3.5模型拼起来:9B的那个负责把视频切成动作片段,27B的负责描述动作并照顾前后文,另一个27BFlora-Rewarder按提示词切换评分角色[1]。



图:机械手在木纹桌面上操作一个灰色小邮箱,左上角标签写着 Dexterous hands(灵巧手)(来源:The Decoder[1])

②

机器人模型要学的标签其实有三种:判断任务成没成的结果奖励、判断每一步好不好的过程奖励(机器人每走一步时的中间评分,用来告诉它哪里做偏了)、以及带时间戳的动作描述。多数现成工具只覆盖其中一种,通用大模型能一起做,但单价撑不住海量视频[2]。

Flora的强项在动作切分。公开基准 WGO-Bench 上,它的边界检测 F1@0.75 是50.3,GPT-6 Astra 为46.0,GPT-5.6 Sol 为33.7,Claude Opus 5 只有25.5[2]。

但整体判断并不全面领先。同一个 WGO-Bench 的金窗口准确率,Flora 是64.7,落后 Astra 的77.4[2]。

自有基准 DenseCaptionBench 上,真人录像子集 Flora 三项全赢,机器人录像子集 Astra 反超,57.9 对 51.0[2]。

奖励评分才是它真正拉开距离的地方。RoboRewardBench 上平均绝对误差(预测分数与人工参考分数之间的平均偏差幅度,数值越低越准)为40.0,Astra 是55.4,GPT-5.6 Sol 是78.0[2]。



图:Temporal segmentation(时间分段)与 Contextual action captioning(上下文动作描述),多张连续照片配秒数标签与时间刻度(来源:The Decoder[1])

③

最能说明问题的是失败检测。一段视频里机器人中途做错了,Flora-Rewarder 能抓住53.3%的失败步骤;同一张表里其他模型最高11.7%,GPT-6 Astra 更是一个都没抓到[1][2]。

切分精度也很直观。一段手势频繁的视频里有37 个参考动作,Flora 认出34 个,GPT-6 Astra 只抓到4 个[1]。

英伟达把 Flora 定位成 Scale AI 那类商业数据服务的开源替代。同一段流程上,Google 的 Gemini 4 Argon 也在做工序识别与失败标记,这个方向已经挤进来两家[1]。

开源的意图写在论文摘要里:让研究者扩展自有的机器人数据集,并探索物理自动科研、人到机器人技能迁移这类新方向[2]。



图:An Open Model Suite for Scaling Robotics Data Engines(一套用于扩展机器人数据引擎的开放模型套件)(来源:NVIDIA 研究页[2])

④

当然,0.72 美元是测算,不是账单:英伟达按每 GPU 每小时10 美元的租金假设推算,换成自建集群或囤卡折旧,125 倍会明显缩水[1]。

评测方法也有一处循环。DenseCaptionBench 的描述由 GPT-6 Astra 打分,而 Astra 同时是被测模型之一,研究者在论文里承认了这个方法学问题[1]。

误报的代价写在同一份结果里:约11%的正常步骤被标成错误。对强化学习是噪声奖励,对线上监控是误报警[1]。

定性错误同样存在。一段机械手用布擦盘子的视频,Flora 把它描述成折叠餐巾[1]。

宁可错杀,也不放过——这套取舍适合批量生成训练数据,不适合当唯一裁判。真正值得关注的不是 125 倍这个数字,而是失败步骤召回率从几乎为零跳到 53.3%:机器人训练里最贵的从来不是正常样本,而是那些没人标出来的错误[1][2]。

参考来源:

[1] Nvidia open-sources Flora to make robot video labeling 125x cheaper than GPT-6 Astrahttps://the-decoder.com/nvidia-open-sources-flora-to-make-robot-video-labeling-125x-cheaper-than-gpt-6-astra/

[2] Flora: An Open Model Suite for Scaling Robotics Data Engineshttps://research.nvidia.com/labs/gear/flora/

欢迎点赞、分享、推荐

一起拥抱AI

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国油价大势已定?若无意外,下个月起燃油车主或要直面3个现实

中国油价大势已定?若无意外,下个月起燃油车主或要直面3个现实

沙雕小琳琳
2026-10-27 03:10:13
美媒表示:004号核航母制造困难,3艘航母已经是极限,难道中方出现技术瓶颈?

美媒表示:004号核航母制造困难,3艘航母已经是极限,难道中方出现技术瓶颈?

绝对军评
2026-10-26 17:02:01
内塔连任、只欠川普轰炸伊朗;而巴西则可能就此开始分裂、独立

内塔连任、只欠川普轰炸伊朗;而巴西则可能就此开始分裂、独立

邵旭峰域
2026-10-28 11:01:28
世界名画的“变态”细节,看得令人发指,第一张图放大全都是惊喜

世界名画的“变态”细节,看得令人发指,第一张图放大全都是惊喜

神奇故事
2026-10-27 01:10:15
央媒笔杆子竟是日本间谍,潜伏中国三十年,2022年临退休接头被抓

央媒笔杆子竟是日本间谍,潜伏中国三十年,2022年临退休接头被抓

观史搜寻着
2026-10-28 19:05:54
美国急了,日本急了,菲律宾腿抖了,英法德沉默了。因为他们发现,中国的潜力不止眼前大家看到的这点东西

美国急了,日本急了,菲律宾腿抖了,英法德沉默了。因为他们发现,中国的潜力不止眼前大家看到的这点东西

扶苏聊历史
2026-10-28 14:06:44
兵败如山倒?加油站或已用现状证明,油车可能真的越来越没活路了

兵败如山倒?加油站或已用现状证明,油车可能真的越来越没活路了

浩渺青史
2026-10-28 05:21:30
女子为减肥每天只吃1个素包子,饿了就喝水,7天瘦9斤,突发胃疼止疼针输液都没用,查出急性重症胆囊炎;医生:切忌长时间空腹

女子为减肥每天只吃1个素包子,饿了就喝水,7天瘦9斤,突发胃疼止疼针输液都没用,查出急性重症胆囊炎;医生:切忌长时间空腹

南方都市报
2026-10-27 08:31:08
罕见!2027年立春、除夕、春节连撞三天,是不是最好的吉祥呢

罕见!2027年立春、除夕、春节连撞三天,是不是最好的吉祥呢

三农雷哥
2026-10-24 23:13:20
俄罗斯让中国心凉?真正可怕的不是西方围堵,而是我们低估了自己

俄罗斯让中国心凉?真正可怕的不是西方围堵,而是我们低估了自己

旧史新谭
2026-06-22 13:09:54
多名院士研究发现:吃一块红薯,就等于给血管添一次堵,真的假的

多名院士研究发现:吃一块红薯,就等于给血管添一次堵,真的假的

垚垚分享健康
2026-10-27 23:40:05
A股:股民坐稳扶好了,信号很强烈,明天周四或更大震荡调整行情?

A股:股民坐稳扶好了,信号很强烈,明天周四或更大震荡调整行情?

趋势清风侠
2026-10-28 17:03:40
蒋介石曾言:亡于日本虽亡国奴,亡于共党连为奴也不能!

蒋介石曾言:亡于日本虽亡国奴,亡于共党连为奴也不能!

微野谈写作
2026-10-11 17:55:11
皇马官方声明道歉:俱乐部和姆巴佩一同公开道歉!对中国怀有深深敬意

皇马官方声明道歉:俱乐部和姆巴佩一同公开道歉!对中国怀有深深敬意

念洲
2026-10-28 17:29:35
上面有解放军,下有公安特警,为什么我国还死抓着武警不放?

上面有解放军,下有公安特警,为什么我国还死抓着武警不放?

古史青云啊
2026-10-28 11:31:01
2026摩托车1-9月销量:豪爵245万辆,宗申第4,五羊本田不及豪进

2026摩托车1-9月销量:豪爵245万辆,宗申第4,五羊本田不及豪进

沙雕小琳琳
2026-10-28 18:28:09
杭州降39%、广州降32%、上海降31%!不是房子卖光了,是房东不卖了

杭州降39%、广州降32%、上海降31%!不是房子卖光了,是房东不卖了

浩渺青史
2026-10-27 05:35:23
姆巴佩每年从中国揽的钱大概占他年收入的多少?

姆巴佩每年从中国揽的钱大概占他年收入的多少?

扶苏聊历史
2026-10-28 10:45:32
美媒:中国航天飞机,太空高清照曝光,“中国版X-37B”比美国X-37B飞行操纵更好

美媒:中国航天飞机,太空高清照曝光,“中国版X-37B”比美国X-37B飞行操纵更好

蓝星杂谈
2026-10-28 09:46:48
日军投降前一夜有多疯狂?一个日本女军医:日军用刀劈开了一个人

日军投降前一夜有多疯狂?一个日本女军医:日军用刀劈开了一个人

小豫讲故事
2026-10-24 06:00:12
2026-10-28 20:27:00
比比超
比比超
一个产品人の观察,深耕AI&出海全球化。 公众号:比比超
183文章数 5关注度
往期回顾 全部

科技要闻

AI世界开口说话!谷歌新模型Genie 4有多神

头条要闻

科普图书现"双头虾"图片 出版社回应:正通知全网下架

头条要闻

科普图书现"双头虾"图片 出版社回应:正通知全网下架

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

巾帼不让须眉!章子怡拿下重磅荣誉

财经要闻

iPhone Duo七年等来一场吐槽大会

汽车要闻

电动大掀背+无框车门+激光雷达 一汽-大众ID. AURA L5真能打动年轻家庭

态度原创

时尚
亲子
游戏
手机
艺术

教你把去年的毛衣,穿出今年的好看

亲子要闻

意大利安东尼亚诺合唱团,兼全球最顶级的儿童合唱团之一

又一经典PS独占被搬上PC!已可完整通关

手机要闻

iPhone Duo屏幕开裂原因初现端倪:铰链中央支撑杆疑似挤压柔性屏

艺术要闻

新地标:大华银行越南新总部,外形像贝壳!

无障碍浏览 进入关怀版