又有了新的AI视频玩法,一张照片就能生成舞蹈视频。 这项名为“通义舞王”的功能在阿里通义千问移动端新增,令人瞩目并热度不减。
它火爆全球的魔性舞蹈“科目三”一经推出就迅速登上热搜榜,甚至连兵马俑都开始跳起来了。
不仅名人如马斯克、库克都能在一张照片中跳起这个魔性舞蹈,就连广受欢迎的科目三也能应用进来。
而且,用户不仅可以上传真人照片,还可以上传动漫、游戏人物、雕塑、手办、绘画等作品,甚至手绘的照片也可以生成视频。下面再来欣赏几个:
会跳兔子舞的梦露
“ 亚洲舞王”尼古拉斯赵四
蜡笔小新的童年瞬间
还有其他卡通人物形象
甚至随手画的小人
想得到这些好玩的视频和动图并不复杂,只需要在通义千问中输入口令“全民舞王”或“通义舞王”,选择喜欢的舞蹈模版并上传全身照,然后等待十几分钟,就能得到一个形神兼备的舞王视频。(详细教程见文末附)
不过目前,“通义舞王”对于输入的照片要求较高,并且只能使用官方的姿态模版,无法自定义姿势。
阿里巴巴的人工智能研究团队研究论文指出,尽管扩散模型在视觉生成领域已经成为主流,但在图像转视频的领域仍然存在一些问题,如局部失真、细节模糊和帧率抖动。
AnimateAnyone是阿里团队在扩散模型的基础上提出了一个新的算法,这个算法的目标是解决仅靠一张照片生成视频所面临的挑战,特别是人物形象一致性的问题。
这个算法可以将静态的人物图像转换成动画视频,并且可以通过输入不同的姿势顺序来准确控制视频中人物的动作。从一致性、可控性和稳定性三个方面,保证了视频输出的效果和质量。
AnimateAnyone的火爆只是冰山一角,实际上,阿里巴巴还推出了一项视频生成技术,名为DreaMoving。这项技术只需一张脸部照片和一句话描述,就能让你在任何地方跳舞。
和AnimateAnyone一样,DreaMoving能够生成真人、卡通、动漫人物等各种角色形象,满足不同用户的需求。这种技术的诞生,进一步扩展了视频生成的可能性,为人们带来了更多创作的乐趣和惊喜。
综合来看,数字经济应用实践专家骆仁童博士表示,"全民舞王"目前正处于满足用户探索新奇心理、吸引用户下载通义千问App的阶段,要在众多AI视频应用中取得成功,关键还在于如何打造更加实用的功能,并成功实施商业模式。
目前,在生成式AI的竞争领域中,AI视频生成并不是最新的概念。在ChatGPT问世之前,微软、Google等公司已经推出了类似的AI视频生成工具,但效果并不明显。
然而,随着技术的长期积累,扩散模型的引入使得厂商们看到了AI视频生成的潜在前景。相较于早期的RNN模型等,扩散模型能够生成更加连贯、清晰的图像和视频序列,加速了视频生成的迭代过程。
主流工具也在此基础上不断进行升级和改进,推动了AI视频生成领域的快速发展。
比如,去年年底,Runway Gen-2进行了一次大规模更新,提高了分辨率至4K,视频生成的真实度和一致性取得了重大突破;一周后,又推出了运动画笔功能,让静态事物动起来。
与此同时,Stability AI发布了Stable Video Diffusion,为AI视频生成领域注入了新的活力。
此外,Pika 1.0凭借其简单易懂的视频生成、便于局部编辑的特点以及高质量的视频生成,在推出初期就受到了硅谷大佬们的关注和支持。从生成到后期,只需要一个工具就能完成整个流程。
数字经济应用实践专家骆仁童博士指出,AI视频生成工具近年来在质量和数量两个方面取得了巨大的进步。在质量方面,这些工具采用了更强大的模型架构,并利用更大规模、更高质量的数据进行训练,从而使得生成的视频画质、流畅度和逼真度逐步提高。
实际上,从此前的妙鸭相机APP来看,阿里已经开始加快AI领域的相关布局。《》
未来,随着算力的进一步提升,生成数小时的高质量视频也将成为可能。借助技术的积累,推动整个行业加速发展,还让我们有更多机会亲身体验AI视频生成技术所带来的各种可能性。
附:阿里通义全民舞王详细教程
第1步:在手机应用商店搜索下载“通义千问”
第2步:进入“全民舞王”
点击对话框中的“一张照片来跳舞”:
或者在输入框内敲“通义舞王”或“全民舞王”等关键词,就可以跳转到相应界面了。
第3步:点击“立即体验热舞”
在输入完“全民舞王”后,我们需要点击界面上的“立即体验热舞”按钮。
第4步:选择舞蹈模板(有多种舞蹈风格可选)
在点击了“立即体验热舞”按钮后,我们会进入一个新的界面。在这个界面上,我们需要选择一种舞蹈模板。这个应用提供了多种舞蹈风格供我们选择,我们可以根据自己的喜好来挑选。
第5步:按要求上传图片(二次元的也行哦)
在挑选照片时,我们应该注意到一些技巧。根据“通义舞王”的建议,我们最好选择一张正面站立的全身照片,确保没有遮挡物,也尽量避免仰俯角度。
第6步:点击立即生成,完成智能生成视频。
在选择好舞蹈模板和上传图片后,我们只需要点击“立即生成”,就可以完成智能生成视频的过程了。
需要注意的是,生成视频的过程可能需要等待大约15分钟左右的时间。在等待的过程中,我们可以切换到其他界面进行其他操作。一旦视频生成完成,我们可以返回到“全民舞王”界面,然后在右上角点击创作历史记录浏览按钮,查看已经生成的视频。
最后来欣赏前全球首富贝佐斯跳宅舞“极乐净土”~~
商道童言(Innovationcases)欢迎点赞和分享哦!~~
免费电子书:||||
数字经济应用实践专家 骆仁童主讲课程
人工智能:
数字应用:
数字中国:
数字化转型:》
产业数字化:《》
宏观与趋势:
思维与技能:》
创新与创业:
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.