网易首页 > 网易号 > 正文 申请入驻

全民AI短剧时代来了!商汤Seko 2.0登场,分分钟手搓百级剧情,你做的AI短剧也能登上热榜

0
分享至


智东西
作者 程茜
编辑 漠影

全民低成本自制爽剧的时代真来了?

短剧行业正迎来爆发式增长,去年微短剧市场规模首超电影票房。

同时眼下,AI也正颠覆短剧产业,深度渗透至短剧创作全链路,瞄准了分钟级出片,和“一人剧组”的工业化生产模式。

但对于短剧观众而言,很多AI短剧目前还未能彻底解决口型对不上、剧情存在逻辑硬伤等槽点;尤其是纯AI驱动的创作,往往还会带来超长剧本架构失控、角色场景设定前后矛盾等等问题。这让观众不得不陷入“边骂边追更”的状态,恨不得自己上手改剧本。

今天,商汤科技在产品发布周上,推出了全新升级的行业首个创编一体、多剧集生成智能体——Seko 2.0版本,其围绕着上述痛点全面更新,高效率、低门槛的特征,让个人创作者也能秒变“一人剧组”。

今年7月上线以来,Seko已经成为诸多视频创作者的必备工具。其联合专业团队打造的《婉心计》登上抖音AI短剧榜断层第一,热度超200万。

下面正是创作者使用Seko创作出的视频效果:

从Seko 2.0的重磅更新出发,我们试图拆解商汤科技在AI视频创作领域的独特打法,解析其底层技术布局。

一、灵感成真!Seko 2.0让AI短剧创作一步到位

主打一步成片的Seko这次更新,将视频生成的高交互性与低门槛拉满了。其更新围绕着三大功能:UI升级、支持100集以内剧本连续创作、Agent智能调度

首先是UI升级,Seko提供了沉浸式的创意体验,用户在生成过程中对人物、分镜、图片、场景的编辑、交互性增强。

打开Seko可以发现,交互界面包含的元素增多。在对话框下方,用户可以直接选择提示灵感,或者可以自行输入提示词。在对话框中,用户还可以直接上传剧本、选择模型、添加主体、添加画风。

在对话框右下角就是另一个重要更新多剧集Agent,打开“多剧集”,用户就能进行长剧集多文本创作。


该Agent会分析文本、给出多剧集大纲、塑造整个剧集的人物和场景塑造,商汤科技Seko产品负责人王子彬称,相比于Seko 1.0,2.0可以直接在编辑界面对所有人物和场景进行精确控制和剪辑。

可以看到在画面左侧,用户能点击+号生成下一集,其会延续第一集的故事设定,保持人物和场景一致。用户还能进行更为细节的交互式处理,如每一个图片、分镜、口型、画布等都可以进行修改。


在上述更新之上,Seko 2.0可以支持多达100集的剧本连续创作。

这波更新,一方面为专业创作者提供了更全面的工具支持,另一方面让非专业人士也能快速上手,轻松将创意想法转化为实际视频。

智东西也体验了下Seko 2.0的生成效果,在没有结合其他视频创作工具的同时,从输入灵感、生成大纲、分镜到调整分镜图、生成视频、导出,智东西在十几分钟内就得到了1分钟左右的一集AI短剧。

生成分镜后,用户可以点击分镜图上方的画布编辑和对口型,对应修改这一部分的视频内容,或者直接在左下角的对话框输入提示词重新生成图片。


生成的短剧视频中,女主角的形象在不同场景切换、不同表情变化的过程中始终保持高度一致,无违和感与割裂感。


并且主角人物表情变化十分细腻,在女主角内心独白时,其通过皱眉到低头、神色缓和的表情变化,将人物内心变化准确刻画了出来。


此次版本更新后,我们在Seko 2.0平台上的整体操作更加流畅自然,它中间还支持用户对细节的自定义修改,生成内容更加契合用户需求。从生成的结果来看,不仅剧情连贯,人物、场景能前后保持一致。更关键的是,对于专业创作者而言,一次就可以完成100集的超长制作!

二、四大核心技术加持,AI短剧告别换脸穿帮、口型对不上

从上面的视频生成效果来看,Seko 2.0已经支持在多人连续对话时精准匹配口型,且能在切换场景与剧集时保证人物表情、形象全程一致,且生成速度高效快捷。

这背后是商汤科技针对性的技术全栈升级。

第一是角色一致性技术SekoIDX,其通过扩散模型优化,平衡参考图相似性与提示词响应性,使得生成效果精准可控。

短剧创作中,换脸式穿帮问题会因为人脸变形、特征失真等瑕疵破坏画面真实感,影响观众的沉浸式观看体验,同时在保证一致性的同时还要让人脸随场景、表情变化更加自然、真实。

基于此,其会提供正向和反向的参考图,适当加入副参考图,以兼顾主体的多样性和一致性,避免直接像复制粘贴主体形象。

第二是多人对口型方案SekoTalk,这也是业内首个支持超过2人对口型的方案。对于短剧而言,多人对口型是强需求,且往往在制作过程中会面临多人对话、连续切换说话人、口癖还原等核心痛点。

商汤科技的实时语音驱动数字人技术SekoTalk,可以在8卡服务器上达到25 FPS的生成速度,首帧延迟低至3.5秒,同时做到多人、多语言的口型精准匹配和超长时间稳定生成。

第三是效率提升技术Phased DMD蒸馏,进一步降低多剧集生成成本。

扩散模型低步数生成的质量受限于等效模型质量,如果等效模型容量不足,低步数生成的视频就会出现模糊、细节缺失、逻辑混乱等问题。主流SOTA视频生成模型已经验证了MoE技术的优势,不需要增加推理阶段的计算开销。

商汤科技研究团队创新性提出Phased DMD技术,既能提升蒸馏模型生成的动态效果和多样性,使SekoTalk推理开销在降低1/25的同时,仍保持教师模型良好的肢体运动效果和情绪表现力。

同时Seko 2.0已经支持性价比更高的寒武纪芯片适配方案

最后是商汤开源的行业首个能够达到实时视频生成的推理框架LightX2V,其与模型协同设计,支持低资源部署。

商汤科技在模型和系统设计之初,就让它们融入低比特量化感知训练、稀疏注意力等原生优化,配合自研“SPARSE+NVFP4+低比特通信”高效注意力算子,模型训练完成后可直接低资源部署。这一开源框架的累计下载量已超350万次

总的来看,Seko 2.0的升级正是聚焦短剧行业痛点,真正达成生成质量与效率的双向平衡。其能实现分钟级出片,还能通过多剧集一致性保证生成视频的质量,更将成本压至最优,破解行业的产能与质量焦虑。

三、Seko进化:让AI短剧进入分分钟出片、零基础上手的全民时代

以Seko为代表的AI视频创作平台的出现与升级迭代,让AI短剧迎来风口。

谈及Seko的产品迭代理念,王子彬谈道,他们的产品定位是和创作者做朋友、为创作者提供便利、满足创作者的需求,也就是真正把“一切围绕创作者”落到实处。

这也可以从Seko的用户画像看出来,他补充说,其有固定创作需求的用户占比在50%~60%之间,这类用户分两类,一类是专业高频创作者,他们对自己的内容有高度把控性和要求,更看重工具易用性;另一类是MCN创作者,其对视频创作有自己的理解,有固定每周1~2个视频创作需求。

王子彬谈道,《婉心计》就是专业创作团队基于Seko打造的AI短剧,创作团队会使用Seko完成大部分流程,然后调用其他工具进行高精修完善创作。

▲AI短剧《婉心计》片段

最后一部分是完全没有创作经验的用户,其占比达到30%-40%,这部分用户一般而言没有二次创作需求,很难长期留存。

无论是具备AI视频创作基础的进阶用户,还是意欲尝鲜体验的入门群体,Seko均可全面覆盖其差异化需求

如今Seko再度更新,为AI短剧创作门槛带来一场降维革命。

此前视频制作需要专业的创作团队,且成本甚至高达百万元级别,如今普通人就可以在家用PC制作一部成片,让视频创作应用到了更为广泛的场景。

如山西一位语文老师通过Seko,将学生的作文直接转换成了视频,在播放的过程中,通过视频形式增强学生对好的作文内容的认同感与共鸣感,同时能进一步增强其创造力和想象力。

此外还有不少跨界创作热潮,如程序员借Seko圆了武侠梦、作家让笔下小说一键变身可视化影像、公务员用它制作生动的历史动画……使得AI视频工具打破行业壁垒,释放更大的产业价值。

在视频创作领域,新人入门难、产能低的难题也被破解

过去漫剧新人需掌握分镜设计、剪辑、模型适配等专业技能,上手周期长且易因操作失误影响产出;而Seko通过简化交互、智能调度模型等功能,让新人无需复杂学习就能快速启动创作。据了解,已经有漫剧工作室新人通过Seko快速上手,日均产出3-4集成片。

产业发展有一大规律是,当创作工具实现普惠,必将催生行业增长的正向循环。

Seko进一步拉低视频创作的门槛,使得更多元化的创作者团队入局,让更多创意大神将脑洞变成新颖的视频,缓解短剧剧情同质化的困境,带动产业规模化增长。

结语:AI视频制作工具,正加速拆掉短剧创作门槛

伴随AI技术进阶,视频生成正在打破视频生成的壁垒,从此前依赖高端、专业团队的创作形式,向普通人也能轻松参与其中的方式扩展。

从Seko的发展轨迹来看,AI视频生成工具正朝着推动视频生成产业实现质量与规模同步提升发展,既通过多维度的技术优化保障内容输出的高质量,又以高效生成能力支撑规模化生成创意视频,人人都是创作者的时代真要来了。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
释永信害惨4位女明星:2个央视名嘴、1个炫富全网被封,她最冤?

释永信害惨4位女明星:2个央视名嘴、1个炫富全网被封,她最冤?

情感大头说说
2026-01-30 11:43:05
今夜,见证历史!刚刚,暴涨!科技巨头,突迎利好

今夜,见证历史!刚刚,暴涨!科技巨头,突迎利好

证券时报
2026-01-30 00:44:05
“戏混子”没走,比资本家丑孩子更可怕的是“星二代”开始世袭了

“戏混子”没走,比资本家丑孩子更可怕的是“星二代”开始世袭了

流史岁月
2026-01-26 10:58:30
美国总统特朗普已听取针对伊朗的多种打击方案

美国总统特朗普已听取针对伊朗的多种打击方案

极目新闻
2026-01-30 10:50:13
斯塔默在三里屯下馆子,英使馆官员:见识到中国如今多先进了吧?

斯塔默在三里屯下馆子,英使馆官员:见识到中国如今多先进了吧?

荆楚寰宇文枢
2026-01-29 23:25:24
一嫁日本,二嫁美国,三嫁法国,绝不嫁中国人的李勤勤,咋样了?

一嫁日本,二嫁美国,三嫁法国,绝不嫁中国人的李勤勤,咋样了?

心灵的触动a
2026-01-30 00:04:59
被核武轰炸45次,罗布泊本该寸草不生,结果却成世界最大钾肥基地

被核武轰炸45次,罗布泊本该寸草不生,结果却成世界最大钾肥基地

鉴史录
2026-01-23 12:12:32
牙科界大地震!中国科学家发明神奇药水,滴几滴烂牙变新牙!

牙科界大地震!中国科学家发明神奇药水,滴几滴烂牙变新牙!

最黑科技
2026-01-29 21:32:23
澳网:德约科维奇大战辛纳 混双决出首冠

澳网:德约科维奇大战辛纳 混双决出首冠

大眼瞄世界
2026-01-30 10:33:23
澳网首冠诞生!10年来首个卫冕组合!张帅明天冲击澳网第二冠!

澳网首冠诞生!10年来首个卫冕组合!张帅明天冲击澳网第二冠!

篮球看比赛
2026-01-30 13:58:23
剑桥20+男生,被大8岁已婚女蓄意接近,卷入三角关系后离奇死亡

剑桥20+男生,被大8岁已婚女蓄意接近,卷入三角关系后离奇死亡

一莎观察
2026-01-29 23:16:05
结婚23年她的内衣都是丈夫洗,在丈夫入狱后,她为夫还债三千万

结婚23年她的内衣都是丈夫洗,在丈夫入狱后,她为夫还债三千万

琨玉秋霜
2026-01-27 14:10:08
广东大部分市县发布橙色以上森林火险预警!冷空气将携雨来袭

广东大部分市县发布橙色以上森林火险预警!冷空气将携雨来袭

南方都市报
2026-01-30 12:55:04
四川女大学生到东北游玩晕倒雪地冻伤,左手三根手指或面临截肢!2300余名爱心人士伸援手

四川女大学生到东北游玩晕倒雪地冻伤,左手三根手指或面临截肢!2300余名爱心人士伸援手

红星新闻
2026-01-29 16:07:17
关机的手机正在监听?国安部紧急警告:你的旧手机可能正在泄露机密!!!

关机的手机正在监听?国安部紧急警告:你的旧手机可能正在泄露机密!!!

大白聊IT
2026-01-30 07:03:56
清算终于开始了!一个要求,震动东京:中国要求日本限期内归还

清算终于开始了!一个要求,震动东京:中国要求日本限期内归还

来科点谱
2026-01-29 09:00:27
俄罗斯警告塞尔维亚别乱来,中国不愿看到的一幕发生,武契奇急了

俄罗斯警告塞尔维亚别乱来,中国不愿看到的一幕发生,武契奇急了

有牙的兔纸
2026-01-30 03:33:01
深成指、沪指跌逾1% 近90股跌超9%

深成指、沪指跌逾1% 近90股跌超9%

财联社
2026-01-30 10:03:13
朱媛媛最后影像!杀青合影时强撑微笑,辛柏青全程陪护成最后守候

朱媛媛最后影像!杀青合影时强撑微笑,辛柏青全程陪护成最后守候

乐悠悠娱乐
2026-01-30 11:06:13
孙守刚、张弓,有新职

孙守刚、张弓,有新职

新京报政事儿
2026-01-30 10:15:03
2026-01-30 15:39:00
智东西 incentive-icons
智东西
聚焦智能变革,服务产业升级。
11154文章数 116945关注度
往期回顾 全部

科技要闻

单季狂赚3000亿;iPhone 17 全球卖疯了!

头条要闻

水贝黄金平台杰我睿暴雷无法兑付:有人超5000万元入局

头条要闻

水贝黄金平台杰我睿暴雷无法兑付:有人超5000万元入局

体育要闻

敢揍多尔特,此子必成大器?

娱乐要闻

金晨出事前 曾灵魂发问未收到春晚邀请

财经要闻

血铅超标工人,挡在“劳动关系”门槛外

汽车要闻

售7.999万元起 2026款大众朗逸新锐上市

态度原创

本地
教育
健康
数码
军事航空

本地新闻

云游中国|拨开云雾,巫山每帧都是航拍大片

教育要闻

鼓楼区三至六年级试卷

耳石症分类型,症状大不同

数码要闻

华硕AM5主板更新Beta BIOS,升级AGESA 1.3.0.0并新增内存功能

军事要闻

新西兰拒绝特朗普:不加入"和平委员会"

无障碍浏览 进入关怀版