网易首页 > 网易号 > 正文 申请入驻

MeViSv2数据集升级亮相,解决视频理解睁眼瞎问题

0
分享至

哈喽,大家好,我是小方,今天,我们主要来看看最近AI学术圈里一个炸锅的消息——视频理解领域的“高考卷”刚刚迎来了史诗级更新。







MeViS的第一代就硬核地纠正了这一点,它立下三条铁律:第一,语言描述必须围绕“运动”,比如“飞走的鸟”、“滚过来的球”,禁止用容易识别的静态特征作弊;第二,场景必须复杂,一群外观相似的物体挤在一起;第三,视频要足够长,平均13秒,目标持续近11秒,考验模型的“长时记忆力”,这样一来,模型被迫必须认真“看视频”,分析动态,才能找到目标,正是这种高难度,让MeViSv1吸引了全球近千支队伍挑战,成为了领域内的标杆。



如果说MeViSv1是出了道难题,那MeViSv2简直就是构建了一个贴近真实的“复杂世界”,它的升级主要体现在三个方面,个个直指当前AI的软肋。





第二,任务拓展:一个数据集覆盖四大核心战场。MeViSv2一次性支持四大任务:指向性视频分割(RVOS)、音频引导分割(AVOS)、指向性多目标跟踪(RMOT)和运动描述生成(RMEG)。



第三,规模与机制升维:专治AI“幻觉”和“逻辑短路”。除了数量增长,MeViSv2新增了两类“杀手级”语句。一类是“运动推理语句”,另一类是“无目标语句”,描述一个视频中根本不存在的动作,专门用来整治那些不懂装懂、强行输出一个目标的AI“幻觉”问题,这要求AI必须具备逻辑判断和说“不”的能力。



面对如此高难度的数据集,原来的模型明显不够用了。研究团队也同步提出了一个新的基线模型LMPM++,这个模型的思路很巧妙,它不再让AI一帧帧硬看视频,而是先把视频里可能的物体都找出来,变成一组简洁的“对象快照”,然后喂给大语言模型(LLM)去分析,LLM擅长逻辑推理,可以跨时间线把动作的前因后果串起来。





此外,它的发布正与国内多模态大模型的研发热潮形成共振,越来越多的科技公司意识到,下一阶段AI的竞争,不仅是“看图说话”,更是“看动态视频并深度理解”。



MeViSv2提供的海量、高质量、强逻辑标注的数据,将成为训练和检验这些大模型视频理解能力的核心资源,它从学术界抛出的一块“试金石”,很可能在未来一两年内,催生出真正能理解复杂动态视觉世界的新一代AI应用。



MeViSv2的发布,无疑为多模态视频理解领域树立了一座新的灯塔,它告诉我们,真正的视频智能,必须能看懂动态、理解因果、抵抗干扰。



前路虽难,但每一次基准的刷新,都是向着让AI更懂我们所在世界迈出的坚实一步,这场关于“动态视界”的竞赛,刚刚进入最精彩的章节。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
吴石遗孀王碧奎 1950 年夫牺牲,台颠沛 30 年拒返赴美吐隐情

吴石遗孀王碧奎 1950 年夫牺牲,台颠沛 30 年拒返赴美吐隐情

磊子讲史
2026-01-06 11:48:34
全新旗舰SUV 蔚来ES9将于第二季度正式上市

全新旗舰SUV 蔚来ES9将于第二季度正式上市

车质网
2026-01-20 09:05:09
特朗普写了一封信,杀气腾腾,槽点满满

特朗普写了一封信,杀气腾腾,槽点满满

牛弹琴
2026-01-20 07:58:25
李亚鹏没想到,向太为其出恶气,窦靖童评价成现实

李亚鹏没想到,向太为其出恶气,窦靖童评价成现实

封情舞韵的诗
2026-01-19 16:21:09
深圳社保已缴满15年,不缴了,可以坐等退休吗?

深圳社保已缴满15年,不缴了,可以坐等退休吗?

深圳本地宝
2026-01-19 22:13:59
周启豪夺冠 喜提15万奖金 提到王楚钦和樊振东 没想到这样说王皓

周启豪夺冠 喜提15万奖金 提到王楚钦和樊振东 没想到这样说王皓

小樾说历史
2026-01-19 09:26:12
江苏大一女生开养老院,无人入住却有近400名客户,员工全是60后

江苏大一女生开养老院,无人入住却有近400名客户,员工全是60后

不写散文诗
2026-01-19 21:23:55
为什么1.8米的床退出中国家庭?过来人说出实情,幸亏没选错!

为什么1.8米的床退出中国家庭?过来人说出实情,幸亏没选错!

家居设计师苏哥
2026-01-19 14:25:20
“一看就是穷人房间”,女儿吐槽家境而不自知,父母不是滋味

“一看就是穷人房间”,女儿吐槽家境而不自知,父母不是滋味

泽泽先生
2026-01-18 21:29:44
河南的雪有多大?都下哪里了?

河南的雪有多大?都下哪里了?

大象新闻
2026-01-19 18:33:08
荷兰外交大臣:特朗普是在“敲诈”

荷兰外交大臣:特朗普是在“敲诈”

参考消息
2026-01-18 21:43:10
轰39+4+7!谢泼德成篮网新宠,杜兰特与乌度卡态度明朗

轰39+4+7!谢泼德成篮网新宠,杜兰特与乌度卡态度明朗

魔血獄苼
2026-01-20 01:09:05
友商全员抄小米,卢伟冰说对了,华为不孤单,又一家厂商引领行业

友商全员抄小米,卢伟冰说对了,华为不孤单,又一家厂商引领行业

老孙说科技
2026-01-18 09:35:51
2艘中国油轮空舱返回!没从委内瑞拉得到一滴石油,川普计谋生效

2艘中国油轮空舱返回!没从委内瑞拉得到一滴石油,川普计谋生效

boss外传
2026-01-19 08:00:07
一场虚荣的“抓周宴”被群嘲,网友:普通家庭,才靠许愿逃避现实

一场虚荣的“抓周宴”被群嘲,网友:普通家庭,才靠许愿逃避现实

妍妍教育日记
2026-01-16 17:07:38
孙守刚,卸任河南省副省长!张铁军不再担任这一职务,已升任副省部级!

孙守刚,卸任河南省副省长!张铁军不再担任这一职务,已升任副省部级!

特特农村生活
2026-01-20 05:59:04
只剩5年?诺奖得主Hassabis放出AGI时间表:还差一两个技术突破

只剩5年?诺奖得主Hassabis放出AGI时间表:还差一两个技术突破

新智元
2026-01-18 17:13:42
上海海港官宣4名新援!

上海海港官宣4名新援!

五星体育
2026-01-19 14:28:53
在性生活前,怎么判断对象有无性病?2个常见方法,了解保护自己

在性生活前,怎么判断对象有无性病?2个常见方法,了解保护自己

蜉蝣说
2026-01-18 19:32:57
游戏结束,中国大规模抛售美债!特朗普政府已通知中方,一个不变

游戏结束,中国大规模抛售美债!特朗普政府已通知中方,一个不变

纪中百大事
2026-01-19 21:28:24
2026-01-20 09:52:49
看看七七
看看七七
感谢关注
52文章数 0关注度
往期回顾 全部

科技要闻

去年预亏60亿后再投百亿 两大车企紧抱华为

头条要闻

女子求职收到66元红包和感谢信 公司:希望表达尊重

头条要闻

女子求职收到66元红包和感谢信 公司:希望表达尊重

体育要闻

错失英超冠军奖牌,他却在德甲成为传奇

娱乐要闻

吴磊起诉白珊珊诽谤,白珊珊称被盗号

财经要闻

2026股市猜想

汽车要闻

徐军:冲击百万销量,零跑一直很清醒

态度原创

房产
本地
艺术
教育
公开课

房产要闻

中旅・三亚蓝湾发布会揭秘自贸港好房子高阶形态

本地新闻

云游内蒙|黄沙与碧波撞色,乌海天生会“混搭”

艺术要闻

书法圈人士秒认墙上14字,普通人能懂吗?

教育要闻

艺术生还有出路吗?AI对艺术专业影响愈发明显

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版