网易首页 > 网易号 > 正文 申请入驻

项目报道|由秒拍和小咖秀的团队孵化,「新壹科技」想打造AIGC时代的超级视频应用

0
分享至

文|沈筱

编辑|王与桐

移动互联网时代,短视频社交媒体平台的兴起,验证了技术驱动下,内容创作门槛降低、生产力提升带来价值创造的巨大潜力。

当下,有了生成式AI技术助力,内容生产模式再次变革的帷幕正徐徐拉开。在AIGC时代,“AI+视频”的组合,能否复制上个十年的成功故事?又能否碰撞出新的火花?

36氪近期接触到的「新壹科技」,就聚焦在AI视频生成领域。公司成立于2021年,由「一下科技」孵化。依托人工智能技术,新壹科技主要面向C端内容创作者,以及B端、G端客户提供系列AIGC视频应用及服务。

一下科技是在移动互联网时代,最早抓住短视频机遇的企业之一,推出了日播放量曾高达26.5亿的「秒拍视频」,以及日活曾高达500万的「小咖秀」等系列产品。新壹科技CEO雷涛介绍,公司的创始团队也早在2020年底,就将研发重心转向AIGC视频生成领域,定位也从专注移动视频应用的公司,转向以视频为核心应用场景的人工智能公司。

回顾过去十年,雷涛认为,短视频社交媒体成功的核心逻辑在于“技术赋能下,产品更好地满足了创作者的创作需求”。

关于AIGC时代,AI+视频应用的成长路径,雷涛告诉36氪:“从打磨好产品的工具属性,获得初始用户,到逐步赋予其观看属性、社交属性,这条路径仍然适用。”但是,在他看来,目前AIGC还处于非常早期的阶段,AI+视频应用更多呈现工具属性特征,难以预判下一阶段何时到来。

因此,新壹科技将“把AI做成视频领域生产力工具”作为新的定位下,公司要达成的首要目标。为此,公司主要做了两方面调整:一是基于新定位,调整了组织架构,不再按做视频应用的逻辑划分部门;二是,在原有AI技术能力基础上,重新搭建AI视频生成的技术底座。

“新壹科技的创始团队经历了视频应用从PGC到UGC的整个过程。我们内部早在2020年就达成共识,认为视频领域向后发展,会朝AI生成的方向走。”新壹科技研发副总裁、AI项目负责人陈鹏向36氪表示,在2020年底之前,公司的AI技术研发主要为视频应用打配合,专注内容推荐算法,以及服务安审团队。

在此之后,新壹科技一方面,抽象出了视频识别、文本处理等方面沉淀的技术方案;另一方面,调研了市面上所有相关AI模型,并选择了适配的新一代文本、图像生成等开源模型,对其进行训练调优。

据介绍,公司已结合自研AI模型和训练调优后的开源模型,开发了「新壹」视频大模型,可同时处理文本、音频、视频、图像多种输入模态。基于此,新壹科技建立了多模型调度的AIGC智能引擎「秒创」,支持通过意图分析,任务拆解,模型选择等中控流程,完成多模态AIGC内容生成任务处理。

产品/服务层面,围绕上述AI技术底座,新壹科技构建了「秒创」智能内容生成平台、「千心」智能助手、「新壹」数字人平台等产品矩阵。同时,面向B端、G端,公司可以提供覆盖行业垂直模型训练、AI视频内容定制、2D/3D数字人等在内的综合解决方案。另外,雷涛透露,一款具备微社交属性的AIGC视频应用即将上线。

「一帧秒创」是新壹科技现阶段的主推产品之一,于2022年10月开放测试,并在今年3月正式上线运营,主要面向内容创作者和B端客户提供文本帮写、文字转语音、文生图、图文转视频等AI内容生成服务。

“相较于移动互联网时代的视频应用,一帧秒创进一步降低了用户内容创作的门槛,提升了创作效率。”雷涛向36氪介绍,产品满足小白用户上手使用的三个条件:

一是,用户可以使用文本帮写服务,完成视频文案撰写和脚本生成;

二是,消除了传统剪辑软件的时间轴概念,采用填空式视频制作方式,通过对文案、素材、AI语音、字幕等智能分析,在自动生成视频时间轴、完成视频素材匹配,能够满足用户的一键成片需求;

三是,2D数字人可以代替创作者出镜。雷涛表示,目前2D数字人制作成本也已降低到专业用户可接受的水平。

在这一视频生成模式下,视频素材质量和匹配精确度是关键。为此,新壹科技从过往积累的来自微博/秒拍、合作版权商以及公开来源的数十亿量级视频数据,提炼出千万量级的高质量结构化数据,搭建了视频素材库。素材提炼和后续素材匹配过程主要由公司自研的场景级、镜头级视频拆分、匹配算法和模型完成。

但同时,雷涛坦言,由于创作本身的自由度较高,不同创作者对同样的文本也会有不同的素材匹配需求,难以做到完全适配。他表示,对视频质量和个性化要求高的客户,也可选择自有素材替换。

另外,为了丰富素材替换选项,新壹科技一方面正在打造激励机制,鼓励专业用户建立、分享自己的私有素材库;另一方面,基于对Stable Diffusion训练调优的模型向用户提供生成图像替换功能。同时,公司正跟进「Runway」的Gen2等视频生成模型的发展。雷涛认为,完全由机器生成视频素材尚需时日。

目前,一帧秒创已累计服务于200万+内容创作者,并实现了一定规模的营收水平。雷涛表示,前期用户除了公众号作者、头条号作者等C端专业用户和营销、传媒类小B客户,还包括视频小白用户。另外,公司已陆续开始与金融、医疗、文旅等多个行业的大型企业客户展开合作。

付费模式方面,一帧秒创主要采用按时长收费逻辑,面向C端用户收取会员订阅+额外时长和特色素材使用费,面向B端用户的额外收费主要产生于定制化服务。

谈及竞争,雷涛告诉36氪:“目前海外类似的创新产品很多,比如Runway、Adobe Firefly等。国内的百度、字节也在跟进相关赛道。”但在他看来,一方面,整体来讲海外产品还比较碎片化,集成度不够高。新壹科技旨在服务用户视频创作,功能覆盖面相对成熟,剪辑只是其中一环;另一方面,各家的切入点不同,比如百度是从自研模型切入,新壹科技更侧重应用层。另外,相较其他同类产品,一帧秒创定位更偏向于不会剪辑,甚至不会写视频脚本的普通用户。

先跑能否一定能赢?对这个问题,雷涛坦言:“不跑肯定赢不了。现在重要的不是考虑10年后怎么‘一览众山小’,想也没用,而是要踏实走好当下的每一步。”他表示,新壹科技现阶段的重点是做好产品工程化,一是素材库迭代,二是算法优化,同时跟紧先进技术发展动态,在此基础上逐步拓宽视频AIGC的应用场景,如偏向娱乐、社交的场景,把视频AIGC的能力交付给更多普通用户。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
能活到100岁的老人,大部分都是在60岁时,戒掉了4件事

能活到100岁的老人,大部分都是在60岁时,戒掉了4件事

39健康网
2024-05-31 21:00:02
中国女排3-0泰国!谁是最大功臣,赛后数据一目了然,蔡斌获赞

中国女排3-0泰国!谁是最大功臣,赛后数据一目了然,蔡斌获赞

知轩体育
2024-06-01 21:39:11
奖池持续上升!大乐透24062期:4注一等奖,花落4省,78注二等奖

奖池持续上升!大乐透24062期:4注一等奖,花落4省,78注二等奖

双色球的方向舵
2024-06-01 23:34:12
实探安徽铜陵坍塌居民楼:建成二十余年历经三次改造,仍未阻止悲剧发生

实探安徽铜陵坍塌居民楼:建成二十余年历经三次改造,仍未阻止悲剧发生

极目新闻
2024-06-01 22:05:24
马航冤魂通灵实录:马航MH370空难十年,巫师召唤亡灵道出惊人内幕

马航冤魂通灵实录:马航MH370空难十年,巫师召唤亡灵道出惊人内幕

飞云如水
2024-05-02 09:10:10
真没想到,原来在小公司上班这么爽!网友:感觉老板在给我打工!

真没想到,原来在小公司上班这么爽!网友:感觉老板在给我打工!

时尚的弄潮
2024-05-18 12:20:12
为什么阿拉伯人这么喜爱中国?网友的经历,看得我满满的自豪

为什么阿拉伯人这么喜爱中国?网友的经历,看得我满满的自豪

趣味萌宠的日常
2024-06-01 12:39:15
一场3-0,让中国女排高枕无忧!就算丢掉亚洲第一,仍稳进奥运会

一场3-0,让中国女排高枕无忧!就算丢掉亚洲第一,仍稳进奥运会

开心体育站
2024-06-01 19:36:26
氧气管被拔,后路被堵死,以军已击杀1.5万哈马斯

氧气管被拔,后路被堵死,以军已击杀1.5万哈马斯

移光幻影
2024-05-30 12:23:02
2-1!3-1!2-0!郑钦文霸气横扫,中国网球3人晋级法网单打第三轮

2-1!3-1!2-0!郑钦文霸气横扫,中国网球3人晋级法网单打第三轮

祝晓塬
2024-06-01 09:43:02
接着卷!5月汽车销量,蔚来像开了挂,理想增长,华为?小米?

接着卷!5月汽车销量,蔚来像开了挂,理想增长,华为?小米?

娱乐圈的笔娱君
2024-06-01 19:29:54
单身男青年腹痛,第1次手术把阑尾切了,直到说有口腔溃疡,医生瞬间泪崩:切错了!

单身男青年腹痛,第1次手术把阑尾切了,直到说有口腔溃疡,医生瞬间泪崩:切错了!

听李医生说
2024-06-01 09:07:58
笑不活了!电视开机率下降到不足三成冲上热搜,我却笑死在评论区

笑不活了!电视开机率下降到不足三成冲上热搜,我却笑死在评论区

雪莉故事汇
2024-05-24 09:16:45
这是贾玲吗?很像一个人,你看像谁呢?

这是贾玲吗?很像一个人,你看像谁呢?

牛叨小史
2024-05-09 09:30:07
中止关税减让,大陆发“严重警告”

中止关税减让,大陆发“严重警告”

环球时报新闻
2024-06-01 06:37:10
为何中国人现在活得越来越累?

为何中国人现在活得越来越累?

清晖有墨
2024-05-16 06:20:51
特朗普被裁定有罪,他还能竞选总统吗?

特朗普被裁定有罪,他还能竞选总统吗?

直新闻
2024-05-31 13:57:47
代煎药的内幕

代煎药的内幕

张景岳中医书友会
2024-05-25 08:54:26
农村留守妇女的性生活到底有多尴尬?

农村留守妇女的性生活到底有多尴尬?

书画艺术收藏
2024-03-06 19:00:05
担心技术被转移到中国 美国正减缓NVIDIA和AMD向中东出口AI芯片的速度

担心技术被转移到中国 美国正减缓NVIDIA和AMD向中东出口AI芯片的速度

cnBeta.COM
2024-05-31 08:45:04
2024-06-02 01:16:49
36氪
36氪
让一部分人先看到未来
144530文章数 2839346关注度
往期回顾 全部

科技要闻

余承东:不卷价格!雷军:将双班制生产!

头条要闻

小伙投资300万在瑞典开拉面馆生意火爆 1碗面卖100元

头条要闻

小伙投资300万在瑞典开拉面馆生意火爆 1碗面卖100元

体育要闻

女排最强2主攻合体 合砍40分打懵泰国

娱乐要闻

白玉兰提名:胡歌、范伟争视帝

财经要闻

实锤!普华永道,危!

汽车要闻

吉利银河E5 Flyme Auto智能座舱首发

态度原创

旅游
家居
本地
健康
公开课

旅游要闻

台北故宫博物院新展:文书珍品里的端阳时节

家居要闻

风雅自来 中式的和谐平衡

本地新闻

食味印象|歙县限定!枇杷味儿的清甜初夏

晚餐不吃or吃七分饱,哪种更减肥?

公开课

近视只是视力差?小心并发症

无障碍浏览 进入关怀版