网易首页 > 网易号 > 正文 申请入驻

77.8%准确率登顶,多模态模型开始自己打游戏了

0
分享至

一个多模态模型在决策基准里拿了第一,靠的不是答题,是打马里奥。

ModelScope 发布视觉多模态大模型 JEV-27B-VL,在独立决策基准 Decision Index Vision 中以 77.8% 的准确率位列 20 款参评模型第一。这个基准包含 13,695 个样本,考的不是看图说话,是决策。


它到底在测什么

Decision Index Vision 的评测对象是模型的决策能力。JEV-27B-VL 在这项评测中不仅准确率登顶,置信度校准的表现也被单独提及——模型输出判断时,对自己有多确定,这件事同样被纳入考量。

换句话说,评测关心的不只是选对,还有模型知不知道自己可能选错。

马里奥演示:从看图到动手

发布方用一段马里奥游戏的实时演示来展示能力。模型需要在短延迟内解析游戏画面,并输出操作的概率分布——不是给一个动作,是给一组动作各自的可能性。

这构成了实时连续决策:画面在变,模型要持续给出下一步的概率判断,而不是回答一道静态题目。置信度校准在这里同样起作用,模型对每个动作的把握程度被一并输出。

演示验证的是目标导向的连续决策特性,而非单帧图像理解。

从静态问答到交互式 Agent

这一转变被概括为:多模态模型正从传统的“静态看图问答”向真正的“交互式智能体(Agent)”演进。

静态问答的输入是一张图、一个问题,输出是一段文字,任务到此结束。交互式 Agent 的输入是持续变化的画面流,输出是动作,任务在时间轴上延续,每一步都影响下一步。

两者的差别不在模型规模,在任务形态。

潜在落点

这类能力被指向两个方向:GUI 自动化与具身智能。前者需要模型看懂屏幕、决定点哪里;后者需要模型看懂环境、决定怎么动。共同点是都要在动态场景里连续做决策,而不是一次性给出答案。

20 款模型参评,13,695 个样本,77.8% 排第一。数字本身不惊人,惊人的是评测的题目类型变了——从“这张图里有什么”变成了“下一步该做什么”。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
周末大消息!002027,重组获批!

周末大消息!002027,重组获批!

数据宝
2026-10-10 20:01:00
伊朗警告鲁比奥:历史可能会重演

伊朗警告鲁比奥:历史可能会重演

参考消息
2026-10-11 11:36:06
她直言厌恶中国,回国捞金上节目全程飙英文,如今现状曝光显老态

她直言厌恶中国,回国捞金上节目全程飙英文,如今现状曝光显老态

阳春三月天晴
2026-10-09 20:49:14
俄乌战争打了4年多,中国终于明白:统一台湾前,这3种人必铲除

俄乌战争打了4年多,中国终于明白:统一台湾前,这3种人必铲除

谭麤爱搞笑
2026-06-07 09:21:42
癌的源头已发现?咸菜没上榜,第1名大家或天天都在吃

癌的源头已发现?咸菜没上榜,第1名大家或天天都在吃

叙说医疗健康
2026-09-05 06:00:24
"人有寿相,一看便知":长寿的人,脸上大多有这几个特征

"人有寿相,一看便知":长寿的人,脸上大多有这几个特征

芹姐说生活
2026-10-02 23:42:40
中了彩票后的人生是啥样?网友:评论区大揭秘,这样买都能中大奖

中了彩票后的人生是啥样?网友:评论区大揭秘,这样买都能中大奖

夜深爱杂谈
2026-10-03 20:31:58
CBA战报:同曦101-99险胜深圳,特奎维恩-史密斯空砍30分

CBA战报:同曦101-99险胜深圳,特奎维恩-史密斯空砍30分

懂球帝
2026-10-11 16:55:25
这红毯 土疯了!马伊琍穿成地摊货 闫妮像地主婆 宋佳礼服上写满野心

这红毯 土疯了!马伊琍穿成地摊货 闫妮像地主婆 宋佳礼服上写满野心

白宸侃片
2026-10-11 03:09:26
膝盖重伤!轮椅推走!NBA天才内线伤退

膝盖重伤!轮椅推走!NBA天才内线伤退

篮球教学论坛
2026-10-11 11:19:09
拓媒预测新赛季阵容!预计胜场数大于41.5,杨瀚森出任第三替补中锋

拓媒预测新赛季阵容!预计胜场数大于41.5,杨瀚森出任第三替补中锋

烟雨洛神生
2026-10-11 11:39:12
六大统一条件!大陆已彻底打破解放局面,今后不会等台湾开出条件

六大统一条件!大陆已彻底打破解放局面,今后不会等台湾开出条件

观察者小海风
2026-10-11 02:53:26
不管你信不信,父母晚年时,谁在身边尽孝谁在躲避,因果自有定数

不管你信不信,父母晚年时,谁在身边尽孝谁在躲避,因果自有定数

枫红染山径
2026-10-11 01:52:56
终于知道为何郑钦文比赛间隙休息的时候总是脱一边鞋子了

终于知道为何郑钦文比赛间隙休息的时候总是脱一边鞋子了

有态度网友19ILam
2026-10-05 08:50:02
惜败!周意无缘16强!

惜败!周意无缘16强!

五星体育
2026-10-11 16:37:28
乌议员当众发出警告!如果冲突不能结束,乌克兰军人将白白送命

乌议员当众发出警告!如果冲突不能结束,乌克兰军人将白白送命

云上乌托邦
2026-10-09 19:03:46
乌克兰总统泽连斯基公开表示:向普京提供礼物无法带来和平,允许俄罗斯出售石油正中其下怀,不幸的是,这是美国强大伙伴们做出的软弱决定

乌克兰总统泽连斯基公开表示:向普京提供礼物无法带来和平,允许俄罗斯出售石油正中其下怀,不幸的是,这是美国强大伙伴们做出的软弱决定

吉刻新闻
2026-10-10 10:32:54
中国为什么不信巴基斯坦和俄罗斯?说穿了,中国早清楚一个真理:瓜达尔港、中俄天然气背后都有算盘,看懂才知主动权在谁手里

中国为什么不信巴基斯坦和俄罗斯?说穿了,中国早清楚一个真理:瓜达尔港、中俄天然气背后都有算盘,看懂才知主动权在谁手里

谈史论今1
2026-10-05 20:16:51
心脏强壮的7个特征,占一个都值得恭喜,你占了几个?

心脏强壮的7个特征,占一个都值得恭喜,你占了几个?

鬼菜生活
2026-10-10 00:25:07
郑钦文被WTA称制胜分女王!决赛战绩5胜5负,直言安德列娃难对付

郑钦文被WTA称制胜分女王!决赛战绩5胜5负,直言安德列娃难对付

排球黄金眼
2026-10-11 00:41:48
2026-10-11 18:12:49
像素与芯片
像素与芯片
有态度网友ytd
207文章数 76关注度
往期回顾 全部

科技要闻

卸任CEO后,苹果董事长库克再度到访中国

头条要闻

95后姑娘办"四无婚礼" 新娘父亲一句吃好喝好直接开席

头条要闻

95后姑娘办"四无婚礼" 新娘父亲一句吃好喝好直接开席

体育要闻

十年回首:湖人三榜眼的夏天,与NBA无关

娱乐要闻

没夫妻生活咋办?冉莹颖绝不求邹市明

财经要闻

黄仁勋长女完婚,万亿帝国如何传承?

汽车要闻

红旗天工07上市 限时16.79万起 硬核通关巴音布鲁克

态度原创

教育
时尚
旅游
本地
健康

教育要闻

今天你刷短剧了吗?

秋天衣服不用总买贵的,用针织衫搭配半身裙,温柔高级又提气质

旅游要闻

这 里 ,一 眼 千 年 !

本地新闻

踏访沙县第一村,寻国民小吃本源

痘坑留下后,还能填平吗?

无障碍浏览 进入关怀版