网易首页 > 网易号 > 正文 申请入驻

生数科技发布Vidu Q1,“参考生”功能可以让视频模型大规模落地吗?

0
分享至

界面新闻记者 | 伍洋宇
界面新闻编辑 | 文姝琪

7月26日,在WAIC2025(世界人工智能大会)上,生数科技最新视频模型Vidu Q1的参考生视频功能成为它此次重点展示的对象。

这是生数科技在视频生成领域对内容生产流程的一次重新梳理。具体而言,此前的视频生成包含较多复杂的前期分镜制作环节,“Vidu Q1参考生”通过对模型算法层面的调整,跳过了这一环节,只上传人物、道具、场景等参考图,就可以直接将多个参考元素生成为一段视频素材,以“参考图——视频生成——剪辑——成片”流程取代分镜生成工作。

例如,输入提示词“诸葛亮与丘吉尔、拿破仑在会议室面对面坐着讨论”,以及三个人物的人物参考图和会议室场景参考图,就可以生成一段三人在同一个会议室交流对话的视频。

这项功能解决了主体一致性问题,这也是视频模型大规模商业化落地的前提。目前Vidu Q1参考生可最多支持七个主体同时输入并始终保持一致,生数科技方面表示,七个主体可以把绝大部分场景和元素固定下来。

生数科技CEO骆怡航对界面新闻记者表示,参考生视频是对传统内容生产流程的变革。在他看来,根据参考主体一键直出视频,是从线下拍摄视频到线上AI创作一个本质的创作流程和方式的转变。其次,这一改动可以构建更通用的创作方式,可更好落地广告、动漫、影视、文旅、教育等不同商业化场景。

多模态模型是当前所有还在坚持基础模型训练的厂商的重点投入方向,而理解与生成一体化被认为是行业共同追求的目标。不过,在自回归架构、扩散架构等底层算法问题上,行业还没有得到一个有效答案。

骆怡航告诉界面新闻记者,从表面上来看,这是一个技术路线选择问题,但对于需要追求应用落地和商业化进程的创业公司而言,这个问题的最终解决要综合研判。

生数科技目前采用U-ViT架构,也是一种主流的基于扩散(Diffusion)和Transformer相结合的架构,不过团队会对个别算法模块等分支部分进行优化。Vidu模型本身也内置多模态理解能力,落地于视频生成。

团队暂时没有将理解与生成一体化放在优先位置,是因为行业客户更关心内容效果而非技术路线,因此模型的创新迭代还是以产业落地为引导。

生数科技正在将Vidu的多模能力接入具身智能领域。7月25日,清华大学与生数科技联合发布具身智能模型Vidar,通过“视频大模型+具身智能”技术路径,实现低成本、少样本泛化,所需数据量约为RDT的八十分之一,π0.5的一千两百分之一。

骆怡航对界面新闻记者解释称,在视频模型和具身智能领域,无论是数字信息还是物理信息,本质上都是时空信息,并且都采用信息输入、决策输出的交互逻辑,因此视频模型对于物理世界规律的理解与具身智能是通用的。团队可以基于Vidu视频大模型基座,通过少量机器人线下实操视频的训练与微调,将生成的虚拟视频转化为对应的机械臂动作。

相较于强调端到端的VLA(Vision-Language-Action)路线,Vidar想要解决前者数据稀缺和难以大规模泛化的瓶颈问题。

视频模型在具身智能领域的能力延伸是一个重要信号,这可能为该领域厂商开启一个潜在的商业市场。

骆怡航表示,考虑到具身智能大规模商业化还需要时间,Vidu目前最高优先级任务仍是提升视频生成能力,并将具身智能领域涉及数字世界与物理世界结合作为持续的探索方向。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
24战10负,热刺是瓜迪奥拉教练生涯至今输球场次最多的对手

24战10负,热刺是瓜迪奥拉教练生涯至今输球场次最多的对手

懂球帝
2026-02-01 11:06:08
徐彬加盟英超狼队引日本球迷热议:勇气值得点赞,中国足球会提高

徐彬加盟英超狼队引日本球迷热议:勇气值得点赞,中国足球会提高

绿茵舞着
2026-02-01 00:29:21
听说忠臣孝子的命更贵?

听说忠臣孝子的命更贵?

走读新生
2026-01-29 16:12:34
上钢新村也被腰斩了

上钢新村也被腰斩了

石辰搞笑日常
2026-01-31 16:19:10
朱标到底有多恐怖?他若不死朱棣不敢篡位,中国历史险些被他改写

朱标到底有多恐怖?他若不死朱棣不敢篡位,中国历史险些被他改写

铭记历史呀
2026-02-01 07:40:42
“小婉君”金铭45岁现状:个子太矮事业受挫,住北京豪宅不婚不育

“小婉君”金铭45岁现状:个子太矮事业受挫,住北京豪宅不婚不育

削桐作琴
2026-01-29 00:03:53
陈松伶自曝晚年将住养老院!遗产早被惦记,外甥女:所有都是我的

陈松伶自曝晚年将住养老院!遗产早被惦记,外甥女:所有都是我的

查尔菲的笔记
2026-01-31 20:11:01
她一生“风流成性、老少通吃”,撩汉无数,现如今56岁却依旧单身

她一生“风流成性、老少通吃”,撩汉无数,现如今56岁却依旧单身

青橘罐头
2026-01-28 11:57:14
李思思不容易,为带货跑内蒙古扎麻花辫子扮少女,身材肥硕像大姐

李思思不容易,为带货跑内蒙古扎麻花辫子扮少女,身材肥硕像大姐

乐悠悠娱乐
2026-02-01 09:12:16
男子千里送发动机后续:客户正脸曝光 全款已退不再合作 警方介入

男子千里送发动机后续:客户正脸曝光 全款已退不再合作 警方介入

离离言几许
2026-01-28 00:13:38
陕甘之战——汉人最伟大的一场巅峰战役,带领华夏重回世界之巅

陕甘之战——汉人最伟大的一场巅峰战役,带领华夏重回世界之巅

小豫讲故事
2026-01-31 06:00:10
女友宣!李昊确定留在青岛西海岸 暂时不去欧洲踢球 效力郑智麾下

女友宣!李昊确定留在青岛西海岸 暂时不去欧洲踢球 效力郑智麾下

念洲
2026-02-01 08:34:24
美国华人直言:中国手机扫码支付是最不智能的发明!

美国华人直言:中国手机扫码支付是最不智能的发明!

阿伧说事
2026-01-20 12:53:01
实在太累了:德约科维奇缺席澳网决赛前训练

实在太累了:德约科维奇缺席澳网决赛前训练

本泽体育
2026-02-01 07:16:24
国籍争议不到1年,人民日报公开点名谷爱凌,邓亚萍的话有人信了

国籍争议不到1年,人民日报公开点名谷爱凌,邓亚萍的话有人信了

阅微札记
2025-12-22 14:28:33
2月4日立春,今年立春不一般,5个生肖要躲春,别忘:吃3样忌3事

2月4日立春,今年立春不一般,5个生肖要躲春,别忘:吃3样忌3事

小茉莉美食记
2026-01-30 07:27:46
法治课|金晨驾车出单方事故,算不算肇事逃逸?

法治课|金晨驾车出单方事故,算不算肇事逃逸?

澎湃新闻
2026-01-31 09:05:04
月销只剩几十辆,小米的高端车和股价一样惨

月销只剩几十辆,小米的高端车和股价一样惨

深水财经社
2026-01-31 15:23:05
安徽面馆老板贴“谢绝多付”告示,称儿子患病曾获40万捐款治仍离世,有好心人吃10元牛肉面付款188元

安徽面馆老板贴“谢绝多付”告示,称儿子患病曾获40万捐款治仍离世,有好心人吃10元牛肉面付款188元

观威海
2026-01-31 23:42:05
胆子太大!全网最年轻“行贿者”曝光,消防员拒收10元“封口费”

胆子太大!全网最年轻“行贿者”曝光,消防员拒收10元“封口费”

火山诗话
2026-02-01 10:57:03
2026-02-01 11:23:03
界面新闻 incentive-icons
界面新闻
只服务于独立思考的人群
1012669文章数 1329614关注度
往期回顾 全部

科技要闻

黄仁勋台北“夜宴”:汇聚近40位台企高管

头条要闻

牛弹琴:中国太厚道了 被多国严重伤害后选择和解合作

头条要闻

牛弹琴:中国太厚道了 被多国严重伤害后选择和解合作

体育要闻

锁喉吃红牌+扇耳光 英超15人打群架

娱乐要闻

马年春晚第三次联排,多位明星现身

财经要闻

黄仁勋台北"夜宴":汇聚近40位台企高管

汽车要闻

新款宾利欧陆GT S/GTC S官图发布 V8混动加持

态度原创

旅游
亲子
本地
公开课
军事航空

旅游要闻

和猛犸象一起露营过夜!自然博物馆首次“夜宿”开启

亲子要闻

为什么大多数中国家长无法独立带娃?网友的分享犹如醍醐灌顶

本地新闻

云游中国|拨开云雾,巫山每帧都是航拍大片

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗民众:伊朗不会屈服于美国霸权

无障碍浏览 进入关怀版