网易首页 > 网易号 > 正文 申请入驻

生数科技发布Vidu Q1,“参考生”功能可以让视频模型大规模落地吗?

0
分享至

界面新闻记者 | 伍洋宇
界面新闻编辑 | 文姝琪

7月26日,在WAIC2025(世界人工智能大会)上,生数科技最新视频模型Vidu Q1的参考生视频功能成为它此次重点展示的对象。

这是生数科技在视频生成领域对内容生产流程的一次重新梳理。具体而言,此前的视频生成包含较多复杂的前期分镜制作环节,“Vidu Q1参考生”通过对模型算法层面的调整,跳过了这一环节,只上传人物、道具、场景等参考图,就可以直接将多个参考元素生成为一段视频素材,以“参考图——视频生成——剪辑——成片”流程取代分镜生成工作。

例如,输入提示词“诸葛亮与丘吉尔、拿破仑在会议室面对面坐着讨论”,以及三个人物的人物参考图和会议室场景参考图,就可以生成一段三人在同一个会议室交流对话的视频。


图片来源:生数科技

这项功能解决了主体一致性问题,这也是视频模型大规模商业化落地的前提。目前Vidu Q1参考生可最多支持七个主体同时输入并始终保持一致,生数科技方面表示,七个主体可以把绝大部分场景和元素固定下来。

生数科技CEO骆怡航对界面新闻记者表示,参考生视频是对传统内容生产流程的变革。在他看来,根据参考主体一键直出视频,是从线下拍摄视频到线上AI创作一个本质的创作流程和方式的转变。其次,这一改动可以构建更通用的创作方式,可更好落地广告、动漫、影视、文旅、教育等不同商业化场景。

多模态模型是当前所有还在坚持基础模型训练的厂商的重点投入方向,而理解与生成一体化被认为是行业共同追求的目标。不过,在自回归架构、扩散架构等底层算法问题上,行业还没有得到一个有效答案。

骆怡航告诉界面新闻记者,从表面上来看,这是一个技术路线选择问题,但对于需要追求应用落地和商业化进程的创业公司而言,这个问题的最终解决要综合研判。


生数科技CEO骆怡航(图片来源:界面新闻)

生数科技目前采用U-ViT架构,也是一种主流的基于扩散(Diffusion)和Transformer相结合的架构,不过团队会对个别算法模块等分支部分进行优化。Vidu模型本身也内置多模态理解能力,落地于视频生成。

团队暂时没有将理解与生成一体化放在优先位置,是因为行业客户更关心内容效果而非技术路线,因此模型的创新迭代还是以产业落地为引导。

生数科技正在将Vidu的多模能力接入具身智能领域。7月25日,清华大学与生数科技联合发布具身智能模型Vidar,通过“视频大模型+具身智能”技术路径,实现低成本、少样本泛化,所需数据量约为RDT的八十分之一,π0.5的一千两百分之一。

骆怡航对界面新闻记者解释称,在视频模型和具身智能领域,无论是数字信息还是物理信息,本质上都是时空信息,并且都采用信息输入、决策输出的交互逻辑,因此视频模型对于物理世界规律的理解与具身智能是通用的。团队可以基于Vidu视频大模型基座,通过少量机器人线下实操视频的训练与微调,将生成的虚拟视频转化为对应的机械臂动作。

相较于强调端到端的VLA(Vision-Language-Action)路线,Vidar想要解决前者数据稀缺和难以大规模泛化的瓶颈问题。

视频模型在具身智能领域的能力延伸是一个重要信号,这可能为该领域厂商开启一个潜在的商业市场。

骆怡航表示,考虑到具身智能大规模商业化还需要时间,Vidu目前最高优先级任务仍是提升视频生成能力,并将具身智能领域涉及数字世界与物理世界结合作为持续的探索方向。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
4死1伤!柳州69岁老人砍邻居跳楼身亡疑长期忍受被小孩吵不得休息

4死1伤!柳州69岁老人砍邻居跳楼身亡疑长期忍受被小孩吵不得休息

历史伟人录
2025-12-17 15:01:17
被欠钱的山东球迷已去世,戴琳在其离世当天还5000元,球迷家属发文

被欠钱的山东球迷已去世,戴琳在其离世当天还5000元,球迷家属发文

潇湘晨报
2025-12-16 12:07:50
大瓜!西安一健身教练被指勾引45岁有夫之妇,更多出轨细节流出…

大瓜!西安一健身教练被指勾引45岁有夫之妇,更多出轨细节流出…

火山詩话
2025-12-17 10:21:05
事业巅峰远赴美国,被老外“玩腻”后晚年回国,如今变成了这样!

事业巅峰远赴美国,被老外“玩腻”后晚年回国,如今变成了这样!

归史
2025-12-09 11:10:44
80后已经有1100万人提前下车了。

80后已经有1100万人提前下车了。

爱吃糖的猫cat
2025-11-16 18:27:38
买了5辆车后才知道,普通家庭买车优先看品牌,很多人不明白!

买了5辆车后才知道,普通家庭买车优先看品牌,很多人不明白!

涵豆说娱
2025-12-02 09:36:15
知名演员官宣:已退出美国国籍,正式成为中国公民!

知名演员官宣:已退出美国国籍,正式成为中国公民!

草莓解说体育
2025-12-17 10:08:45
阿萨德一家在莫斯科近况曝光:重操眼科医生旧业、女儿从莫斯科国际关系学院刚毕业

阿萨德一家在莫斯科近况曝光:重操眼科医生旧业、女儿从莫斯科国际关系学院刚毕业

红星新闻
2025-12-16 14:13:17
王炸登场,电脑端最强输入法来了!

王炸登场,电脑端最强输入法来了!

黑猫科技迷
2025-12-17 11:40:01
越南军舰强闯台海?轰6K挂弹起飞!中越这笔账,今天必须算清

越南军舰强闯台海?轰6K挂弹起飞!中越这笔账,今天必须算清

大国知识局
2025-12-14 18:16:05
iOS 26.2正式版真正有用的 7 个新功能,更新后不打开等于白升

iOS 26.2正式版真正有用的 7 个新功能,更新后不打开等于白升

小兔子发现大事情
2025-12-16 00:27:59
12月17日人民币对美元中间价调升29个基点

12月17日人民币对美元中间价调升29个基点

证券时报
2025-12-17 09:31:03
普京智囊做出预言:下一个爆发战争的地方既不是台海,也不是南海

普京智囊做出预言:下一个爆发战争的地方既不是台海,也不是南海

古史青云啊
2025-12-13 14:25:22
女生小肚子突出,千万警惕这种情况(不是胖)!

女生小肚子突出,千万警惕这种情况(不是胖)!

瑜伽解剖学
2025-12-14 21:05:04
糖尿病最怕的早餐!医生再三强调:宁可饿着,也别碰这5种早餐

糖尿病最怕的早餐!医生再三强调:宁可饿着,也别碰这5种早餐

读懂世界历史
2025-12-17 21:28:48
人类对某鱼的开发不足1%,网友:只有你想不到,没有你买不到的

人类对某鱼的开发不足1%,网友:只有你想不到,没有你买不到的

奇特短尾矮袋鼠
2025-12-02 07:45:05
英国游客吃烧烤没给钱,次日带翻译来道歉,摊主一句话老外瞪大眼睛

英国游客吃烧烤没给钱,次日带翻译来道歉,摊主一句话老外瞪大眼睛

卡西莫多的故事
2025-11-02 14:02:25
FBI全美收网!13名华人跨州偷“地沟油”被捕

FBI全美收网!13名华人跨州偷“地沟油”被捕

华人生活网
2025-12-17 04:59:45
孙颖莎的诊断结果出来了,医生直接下了禁赛令

孙颖莎的诊断结果出来了,医生直接下了禁赛令

最爱乒乓球
2025-12-18 00:06:58
张含韵的奶欲更勾人,36岁依旧童颜,身材却饱满成熟韵味满满

张含韵的奶欲更勾人,36岁依旧童颜,身材却饱满成熟韵味满满

草莓解说体育
2025-11-20 13:10:19
2025-12-18 02:28:49
界面新闻 incentive-icons
界面新闻
只服务于独立思考的人群
983762文章数 1327965关注度
往期回顾 全部

科技要闻

特斯拉值1.6万亿靠画饼 Waymo值千亿靠跑单

头条要闻

坠亡女教师有已婚哥哥和未婚弟弟 父母被指不愿退彩礼

头条要闻

坠亡女教师有已婚哥哥和未婚弟弟 父母被指不愿退彩礼

体育要闻

短短一年,从争冠到0胜垫底...

娱乐要闻

狗仔曝热播剧姐弟恋真谈了???

财经要闻

重磅信号!收入分配制度或迎重大突破

汽车要闻

一车多动力+双姿态 长城欧拉5上市 限时9.18万元起

态度原创

本地
教育
时尚
健康
公开课

本地新闻

云游安徽|踏过战壕与石板,读一部活的淮北史

教育要闻

高三一轮复习,别太聪明,踏实一点

你算老几?我算老己!

这些新疗法,让化疗不再那么痛苦

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版