网易首页 > 网易号 > 正文 申请入驻

OpenAI 5亿美金没买走的游戏数据,正在被拿来训练机器人

0
分享至

2024 年,OpenAI 曾开价 5 亿美元,想买一个游戏录屏产品。

它叫 Medal,在全球有 1700 万月活用户,覆盖上万款游戏。当玩家打游戏时按一下键,它就能帮助把前几秒的画面就自动剪成短片,保存、分享。

但 Medal 创始人皮姆·德·维特拒绝了 OpenAI 这笔交易,并在一年后自己下场基于 Medal 孵化出一家 AI 公司 General Intuition —— 专门拿这些游戏数据,训练能感知、预测,能在“虚拟与物理环境中行动的新一代模型”。


这个从游戏视频到世界模型的故事,有不少大佬买单。

就在前几天,General Intuition 官宣自己拿到了 3.2 亿美元的 A 轮融资,投资人有亚马逊创始人杰夫·贝索斯和前 Google CEO 埃里克·施密特的机构。

此时它的估值已经达到 23 亿美元,比一年多前 OpenAI 的收购价高了 4 倍。


不只是 General Intuition,最近新盯上游戏数据的公司不在少数。

今年 5 月,位于美国旧金山的 Origin Lab 宣布拿到了 Lightspeed 领投的 800 万美元,做的事也是把游戏里的数据整理出来喂给 AI。

这个月,英国剑桥又冒出一家 Worldmodeldata。它拿了 700 万英镑种子轮,同样是收集游戏数据训练 AI,尤其是世界模型。

OpenAI看上的不是视频,是你按了哪个键

这几家公司里最受关注的,是接连得到 OpenAI 和亚马逊创始人贝佐斯青睐的 General Intuition。

用游戏数据结合 AI,不算一件很特别的事情,像强化学习、数据合成、仿真这些场景,都有游戏的存在。


但基于 Medal 长出的 General Intuition 有着自己的特殊性 —— 它的数据看起来更适合训练世界模型,用在机器人场景。

想象一下,如果只拿一段普通的 YouTube 游戏直播数据喂给模型,只能让它学到这个世界长什么样,学不到玩家做了哪个动作、动作之后世界怎么变。而机器人大模型要学的精髓,恰恰是后面这半截。

Medal 的数据能留住这些关键信息。

它的录屏软件,在录画面的同时还以第一人称视角把玩家的操作记了下来(官方说做了隐私处理),像按键、鼠标移向哪里,都会带着时间和操作数据。

再加上,玩家爱上传的一般都是打得特别好或者翻车特别惨的精彩片段。这种极端案例,往往在现实生活中很难收集,也是 AI 训练最想要的。

这些年,Medal 的游戏视频数量已有每年 20 亿条,条条都带着这样的稀缺信息。攒到今天,Medal 已经成了最大的、带动作标签的视频数据集之一。


从Agent到机器人,都要“长脑子”

自立门户的 General Intuition 拿着这批数据,训了自己的模型。从公开信息看,它至少在做两类模型:决定动作的 action models 和预测动作结果的 world models。


CEO 皮姆形容自家的模型会在接收视频帧后,直接输出控制信号,不需要语言指令,机器人自己看了就知道下一步该做什么。也就是说,这个架构去掉了语言这一层,让机器人接收模型原生输出的操作信号。

General Intuition 模型的训练主要分为三步。

首先是用 Medal 的游戏数据做基础预训练。游戏里有精确的 action labels 做监督信号,模型学的是从“看到这个画面 + 做了这个操作”,到“世界变成了那样”的因果关系。

第二步是用世界模型生成仿真环境,充当"训练场"。世界模型能逐帧生成环境,具备初步交互能力的 agent 在里面自主探索、试错,不需要真实硬件。

第三步,用少量真实世界数据做微调,上真机。


今年 6 月底,TechCrunch 记者到 General Intuition 的办公室做了一次现场探访,报道里有两个场景引起了关注。

首先是在一台显示器上,有 Agent 在一个类似堡垒之夜的游戏里连续玩了 100 个小时。它背后没有真人玩家,是模型在自主操控。

第二个,是同一个办公室里的一台四足机器人正在来回走动。数据分析师抱着一台笔记本跟在机器人旁边,笔记本上实时显示机器人单目摄像头的画面。机器人被设置成"探索"模式,靠这只"独眼"自主导航,绕过人、绕过桌子,但偶尔撞上垃圾桶或者剐蹭椅子腿。

这两个场景背后,是同一个 General Intuition 的模型。 那台四足机器人的微调,据说只用了 8 分钟户外的真实数据。

另外,General Intuition 现在还在持续优化数据丰富度。由于游戏覆盖种类问题,Medal 的导航、瞄准、走位数据很丰富,但模拟驾驶、飞行控制、物理解谜之类的游戏还不够。


为补齐这些缺口,General Intuition 推出了一个叫 Nerve 的众包平台,让玩家用自己的游戏设备接任务赚钱。Nerve 可以按需采集特定类型的游戏数据,不用坐等现有用户覆盖所有场景。后续,他们还计划让玩家参与机器人远程操控。

这和现在很多具身公司如出一辙,从数据到模型,自己闭环。

还有,盯上游戏数据的它们

除了已经推出初步成果的 General Intuition,还有一批公司新盯上了游戏视频数据。

和传统数据标注类似,在游戏数据和世界模型公司之间,出现了数据服务商的生意。它们做的事,就是去跟游戏公司谈授权、把游戏世界里的数据合规地采下来整理好,再卖给有需求的世界模型公司。

美国公司 Origin Lab 和 英国企业 Worldmodeldata 做的就是这个,最近它们都拿到了融资。

Origin Lab,今年 5 月带着 800 万美元的种子轮出现在公众视野。


它的三位创始人兼具游戏和科技背景。

一位在 PlayStation 和 Xbox 工作过、后来开了家服务 EA、Riot、Epic 的游戏营销公司;一位是 Twitch 的早期高管、做到了首席战略官;还有一位是干了十年数据科学和机器学习的 CTO。

或许因为天生自带资源,Origin Lab 已经跟 20 多家发行商、50 多款游戏签了约。


位于英国的 Worldmodeldata 也在做差不多的事情。这家 base 剑桥的公司上周官宣融了 700 万英镑,团队不到 10 人。官网里,他们专门说自己的客户画像是世界模型和具身智能。


它的创始人 Rhea Loucas,厘清了自己和 Origin Lab 、General Intuition 的异同,说 General Intuition 是把数据留在自己手里、自己训模型,而 Worldmodeldata 只卖数据,给需要的实验室供货,定位和 Origin Lab 类似。

Worldmodeldata 的创始人也是游戏行业出身,董事长则是 Meta 前欧洲公共政策副总裁,是自带资源的创业者。

靠谱的和有疑问的

这个故事听起来很美,市场也在逐步火热。但看完这些信息,我的心里还是有点疑惑,拿游戏视频搞机器人大模型,在真实任务上到底有多靠谱?

我查了一些资料,发现这个事情已经有些验证。

比如一篇韩国团队和斯坦福大学的论文,今年被 ICLR 接收。这篇论文用游戏和桌面交互数据预训练视觉-动作模型,然后测试在真实机器人任务上的表现。


实验结果证明,这种方案在 LIBERO 操作基准上达到 96.6% 成功率,在 CANVAS 导航基准上 83.3%。他们还用一台 SO101 机械臂做了真实的抓取实验,发现预训练后成功率从基线 70% 提升到 80%。

论文的结论指出,数字交互中的感觉运动原语具有足够的不变性,可以有意义地迁移到物理具身任务。

但这个方向也有几道具体的坎。

第一个,是游戏操作是低维的,机器人关节是高维连续控制。

Medal 的 action labels 记录的是玩家的操作行为,像移动、瞄准、开火这些。键盘是几个离散按键,鼠标也只是二维的连续移动。但一台人形机器人走一步,可能就要同时协调几十个关节的角度、速度、力矩。

第二个问题也很严肃,就是游戏物理不等于真实物理。

让机器人学习到真实的物理世界,需要真实的感知。像游戏引擎里的碰撞检测和重力模拟都是简化版,这些到了有摩擦、有变形、有柔性物体的真实世界能管多少用,也很难说。

还有一个,是 Demo 和需求之间的鸿沟。

General Intuition 现场 demo 展示的是四足机器人走路。

走路,是四足运动里相对基础的能力,但具身智能的理想场景,是双足人形机器人可以在工厂、家庭环境中完成精细化操作。General Intuition 的 Demo 还不符合这些期待,只是先选了更适合游戏数据映射的四足机器人做试验。

至于更纯粹的送水人 Worldmodeldata 和 Origin Lab,能不能持续赚钱也得看下游需求的印证情况。

一个关键节点是,2026 年夏末,General Intuition 将向更多客户开放 API。到时候,第一批外部用户会有真实反馈。

在此之前,我们或许难以判断,游戏录屏里数十亿次按键操作,到底能不能教会机器在物理世界里可靠地干活。

资本此时给 General Intuition 的数亿美元,买的也不是答案,而是一张提问的入场券。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
三大运营商终于作“死”了自己

三大运营商终于作“死”了自己

细雨中的呼喊
2026-06-10 23:49:50
特朗普终于翻脸了,决定放出埃尔多安,去“撕咬”内塔尼亚胡

特朗普终于翻脸了,决定放出埃尔多安,去“撕咬”内塔尼亚胡

罗富强说
2026-07-08 14:36:03
王子文王朔恋情曝光,67岁近况引猜测,徐静蕾联系之谜

王子文王朔恋情曝光,67岁近况引猜测,徐静蕾联系之谜

流云随风去远方
2026-07-07 19:42:36
牡丹花下死,做鬼也风流!这一次,75岁的张纪中彻底沦为了笑话

牡丹花下死,做鬼也风流!这一次,75岁的张纪中彻底沦为了笑话

刘森森
2026-07-06 06:00:13
乌克兰无人机打穿俄能源防线?十大炼油厂九家遇袭,普京紧急开会商讨燃油危机

乌克兰无人机打穿俄能源防线?十大炼油厂九家遇袭,普京紧急开会商讨燃油危机

澎湃新闻
2026-07-08 19:44:27
蓝色高腰瑜伽裤,勾勒人妻饱满丰腴腰臀曲线,休闲熟女氛围感拉满

蓝色高腰瑜伽裤,勾勒人妻饱满丰腴腰臀曲线,休闲熟女氛围感拉满

只要高兴就好
2026-06-28 20:30:08
最高院:提供 “口交” “肛交”等进入式性服务,是否属卖淫行为?

最高院:提供 “口交” “肛交”等进入式性服务,是否属卖淫行为?

周军律师聊案子
2026-04-21 09:50:16
爆笑!28岁张雨霏模仿哈兰德 亲切称“哈宝”+道歉 网友:太像了

爆笑!28岁张雨霏模仿哈兰德 亲切称“哈宝”+道歉 网友:太像了

老吴教育课堂
2026-07-08 18:15:52
世界杯又要爆冷?8强这2场容易翻车 阿根廷+英格兰中招 法国不稳

世界杯又要爆冷?8强这2场容易翻车 阿根廷+英格兰中招 法国不稳

侃球熊弟
2026-07-08 07:22:37
梅西发文谈大逆转心情,小贝评论:NO.1,迪马利亚评论:加油队长

梅西发文谈大逆转心情,小贝评论:NO.1,迪马利亚评论:加油队长

画夕
2026-07-08 08:12:05
太卷了!网传深圳一学校采用“化整为零、隐蔽操作”方式变相补课

太卷了!网传深圳一学校采用“化整为零、隐蔽操作”方式变相补课

火山詩话
2026-07-06 06:20:21
对比三代名帅差距明显!如今赵勇缺少比赛掌控力,问题一目了然

对比三代名帅差距明显!如今赵勇缺少比赛掌控力,问题一目了然

金毛爱女排
2026-07-08 00:00:04
买桃子别只挑红的!果农:分清圆头尖头,4招买到“儿时味”

买桃子别只挑红的!果农:分清圆头尖头,4招买到“儿时味”

阿龙美食记
2026-07-07 19:54:49
董路:认为埃及队被黑的都是C罗球迷!阿根廷没有被FIFA内定冠军

董路:认为埃及队被黑的都是C罗球迷!阿根廷没有被FIFA内定冠军

念洲
2026-07-08 16:53:39
埃及公开炮轰裁判,恐遭国际足联重罚!埃及足协:我们还要投诉!

埃及公开炮轰裁判,恐遭国际足联重罚!埃及足协:我们还要投诉!

刘哥谈体育
2026-07-08 13:36:39
记者:阿韦洛亚带了自己的团队去富勒姆,还挖了皇马体能教练

记者:阿韦洛亚带了自己的团队去富勒姆,还挖了皇马体能教练

懂球帝
2026-07-09 01:26:09
莫言:你细心观察一下你的身边人,凡是动不动就生气的人,没有一个是智者,生活多半过得一团糟糕

莫言:你细心观察一下你的身边人,凡是动不动就生气的人,没有一个是智者,生活多半过得一团糟糕

每日一首古诗词
2026-06-18 06:32:18
丰田官宣新车,15.4万元,即将上市

丰田官宣新车,15.4万元,即将上市

科技堡垒
2026-07-07 09:01:18
审判不到两天,莎拉通知全球,亲华派决不投降,手里还有两张王牌

审判不到两天,莎拉通知全球,亲华派决不投降,手里还有两张王牌

阿搏体育
2026-07-08 23:42:20
儿子高考672分大办升学宴,宴席当天校长急电:别办了,出大事了!

儿子高考672分大办升学宴,宴席当天校长急电:别办了,出大事了!

背包旅行
2026-07-07 19:05:02
2026-07-09 06:08:49
四木相对论 incentive-icons
四木相对论
唠唠科技,看看世界
159文章数 3关注度
往期回顾 全部

科技要闻

独家对话小红书IPO举报风波当事人

头条要闻

广西贵港3000名师生等待救援 老师:人几乎都要被冲走

头条要闻

广西贵港3000名师生等待救援 老师:人几乎都要被冲走

体育要闻

阿根廷绝境重生,离不开这个罗!

娱乐要闻

鹿晗出轨?邓超出轨绯闻又被扒出

财经要闻

新能源车"外挂电池"乱象:暗藏致命风险

汽车要闻

MB.EA纯电架构/售价33.98万 全新奔驰纯电GLC鎏金版上市

态度原创

亲子
数码
本地
家居
军事航空

亲子要闻

2026蚌埠市第二十一届【华运超市杯】“未来之星”少儿才艺大赛,报名通道已开启!

数码要闻

1399元!小米发布米家无线洗地机5:污渍毛发一拖即净

本地新闻

万斤西瓜免费吃,来河南顶“瓜瓜”

家居要闻

2026建博会(广州) 公装联探展交流活动

军事要闻

特朗普:美伊谅解备忘录“已终结”

无障碍浏览 进入关怀版