网易首页 > 网易号 > 正文 申请入驻

直播神器!全球首个实时AI视频模型 MirageLSD

0
分享至

decart正式发布 MirageLSD — 全球首个“实时流式扩散”(Live-Stream Diffusion, LSD)AI 视频模型,它能够将你的想象力实时注入任意视频流中,实现从“观看魔法”到“亲手施展魔法”的飞跃式体验。同步上线了由 MirageLSD 驱动的平台 Mirage 的演示版本(现已开放网页版,iOS 和 Android 客户端将于下周发布)。与其他存在十秒以上延迟、仅能生成短片段的 AI 视频模型不同,Mirage 可在小于 40 毫秒的响应时间内无限实时生成视频。

它是继 Oasis(爆火的“AI 我的世界”)之后的第二款模型,研发周期为半年,期间攻克了多项数学难题,并手工编写了高效的 GPU 汇编代码。Mirage 只是起点,即将推出更多视频模型,并拓展到音频、情绪、音乐等多维度感官体验,致力于构建一个将所有感知变为通向想象世界的入口的平台。从今天开始,你就可以通过 Mirage,在任意设备上,将现实场景、游戏内容、甚至影视画面,实时“变身”为拥有奇幻物理法则与魔法设定的新世界。(体验链接在文章底部,体验下来还有很大优化空间,继续期待)

01 技术原理

MirageLSD 是首个实现无限时长、实时生成且无延迟的视频模型系统。它基于LSD模型,采用逐帧生成方式,同时保持时间一致性,使得视频内容可以连续生成且实时响应用户输入。与传统视频生成模型相比,LSD 避免了每段视频需整体生成或分块生成所带来的延迟问题,使互动性大大增强。

过去的视频生成系统无法持续生成长视频,是因为每一帧的误差会传递并积累,导致质量迅速下降。LSD 通过引入“Diffusion Forcing”进行逐帧去噪,并加入“历史增强”策略,即在训练中故意引入带有错误的历史帧,并训练模型识别并纠正这些错误。这使得 LSD 成为首个能够无限生成且不崩溃的视频模型。

要实现真正的 24FPS 实时生成,模型每帧必须在 40ms 内完成生成。为此,MirageLSD 使用三大优化手段:① Hopper 架构优化的 CUDA Mega Kernels,减少每层的启动和通信开销;② 结合架构剪枝,充分利用 GPU 特性减少计算量;③ Shortcut Distillation,用精简模型复刻大模型的去噪路径,从而减少推理步骤。这些优化共同将延迟压缩至可实时交互的程度。

LSD 采用了一种不同的方法。它以因果、自回归的结构逐帧生成视频,每一帧都依赖于先前生成的帧以及用户的提示。这种方式实现了即时反馈、零延迟交互,并能够持续生成视频而无需预设终点。

在每一个时间步,模型会接收一组过去生成的帧 、当前输入帧 ,以及用户定义的提示 ,然后预测下一个输出帧 ,并将其立即用于下一步的生成过程。

这种因果反馈循环让 LSD 在保持时间一致性的同时,能够持续适应运动和内容变化,实现无限时长的视频生成;同时,通过“Diffusion Forcing”预训练方法,模型学会独立去噪单帧图像,无需完整视频上下文,从而实现了对文本提示或视频变化的零延迟即时响应,支持实时编辑与变换。

相比其他模型(如 MovieGen、WAN、Veo、CausVid 等),MirageLSD 是唯一同时具备无限时长、实时速度、零延迟互动、时序稳定性的系统。其他系统要么是固定时长、要么响应延迟严重,或无法持续互动,LSD 则整合多项关键技术打破了这些限制。

https://mirage.decart.ai/

欢迎交流~,带你学习AI,了解AI

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中使馆发最强“战斗檄文”:马科斯驱逐中国大使,但所有人将离开

中使馆发最强“战斗檄文”:马科斯驱逐中国大使,但所有人将离开

谛听骨语本尊
2026-01-30 11:40:39
关中最低-14℃!陕西发布灾害性天气预报!降温又要来了→

关中最低-14℃!陕西发布灾害性天气预报!降温又要来了→

环球网资讯
2026-01-31 15:03:08
麦基换掉奎因?广东外援阵容或大换血,萨林杰保不住杜锋的内线!

麦基换掉奎因?广东外援阵容或大换血,萨林杰保不住杜锋的内线!

绯雨儿
2026-01-31 13:50:42
田庆盈,辞去四川省人民政府副省长职务!

田庆盈,辞去四川省人民政府副省长职务!

青州论坛
2026-01-31 15:28:37
收到利好消息,高市早苗瘪嘴笑,日本右翼:中国将不得不放她一马

收到利好消息,高市早苗瘪嘴笑,日本右翼:中国将不得不放她一马

晓踏就是我
2026-01-31 15:13:26
巴拿马最高法院最新裁定,中方回应

巴拿马最高法院最新裁定,中方回应

环球时报国际
2026-01-30 16:16:48
原来李莉就是“春晚钉子户”孙涛的老婆,难怪孙涛每年都能上春晚

原来李莉就是“春晚钉子户”孙涛的老婆,难怪孙涛每年都能上春晚

李健政观察
2026-01-29 09:23:45
特朗普:已向伊朗告知达成协议的最后期限

特朗普:已向伊朗告知达成协议的最后期限

环球网资讯
2026-01-31 05:34:37
震惊!网传山西有人在亲人坟头上装了监控,当地网友爆料事件原因

震惊!网传山西有人在亲人坟头上装了监控,当地网友爆料事件原因

火山诗话
2026-01-30 06:01:08
禁止评论!杜兰特自曝躺床上生活照引热议 布克塔图姆都为他点赞

禁止评论!杜兰特自曝躺床上生活照引热议 布克塔图姆都为他点赞

追球者
2026-01-31 07:45:31
罪有应得!官方彻查后,闫学晶再迎噩耗,她最担心的事还是发生了

罪有应得!官方彻查后,闫学晶再迎噩耗,她最担心的事还是发生了

来科点谱
2026-01-23 11:08:02
古特雷斯表态:公投不能决定克里米亚和顿巴斯归属

古特雷斯表态:公投不能决定克里米亚和顿巴斯归属

桂系007
2026-01-30 03:46:03
韩国公布具俊晔祭拜大S画面,首回应陪伴大S原因,几个行为遭质疑

韩国公布具俊晔祭拜大S画面,首回应陪伴大S原因,几个行为遭质疑

古希腊掌管月桂的神
2026-01-31 10:44:36
绷不住了,集团大面积待岗欠薪!

绷不住了,集团大面积待岗欠薪!

黯泉
2026-01-29 22:31:20
穿爆浆鞋大闹退款后续:宝妈账号被扒,老公被牵连,自爆身份特殊

穿爆浆鞋大闹退款后续:宝妈账号被扒,老公被牵连,自爆身份特殊

卷史
2026-01-31 11:58:01
没想到,李在明访华结束刚半月,中国竟在韩方掀起这么大“后劲”

没想到,李在明访华结束刚半月,中国竟在韩方掀起这么大“后劲”

铁锤简科
2026-01-28 18:33:05
一人睡遍整个娱乐圈?司晓迪打响了2026年第一炮

一人睡遍整个娱乐圈?司晓迪打响了2026年第一炮

阅毒君
2026-01-05 07:05:06
“失业无人管,创业有人查”!这句话刺痛了多少中年人?

“失业无人管,创业有人查”!这句话刺痛了多少中年人?

今朝牛马
2026-01-28 22:04:41
2025 年全球手机销量排行榜来了!第三名有点意外啊

2025 年全球手机销量排行榜来了!第三名有点意外啊

XCiOS俱乐部
2026-01-30 19:14:42
不等春节?美航母或1天内开战,中方不许3事发生,俄英法已选边站

不等春节?美航母或1天内开战,中方不许3事发生,俄英法已选边站

阿伧说事
2026-01-28 15:22:57
2026-01-31 17:20:49
带你学AI
带你学AI
分享最前沿AI知识,先进的AI工具
379文章数 8关注度
往期回顾 全部

科技要闻

中国车企和特斯拉的下一战,战场已定

头条要闻

市公安局原副局长获刑:私放走私车辆 入股色情场所

头条要闻

市公安局原副局长获刑:私放走私车辆 入股色情场所

体育要闻

新时代得分王!东皇37+三双刷7纪录怒吼释放

娱乐要闻

成龙入驻小红书,怼脸近照没有老年斑

财经要闻

白银,暴跌!黄金,40年最大跌幅!

汽车要闻

新款宾利欧陆GT S/GTC S官图发布 V8混动加持

态度原创

家居
亲子
房产
旅游
公开课

家居要闻

蓝调空舍 自由与个性

亲子要闻

白百何终于晒儿子正脸!元宝帅气模样公开,网友:比爸爸还好看

房产要闻

藏不住的小城大事,海澄新城执掌自贸港风口,进阶兑现美好生活新篇

旅游要闻

“好客山东·见识齐鲁” 2026寒假研学旅游交流推广活动在潍坊举办

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版