网易首页 > 网易号 > 正文 申请入驻

京东开源实时流式视频编辑模型

0
分享至

IT时代网8月5日消息,京东把自研的实时流式视频编辑模型JoyAI-Video-Edit开源了。这套模型最直观的变化在于打破了先成片再剪辑的老流程——画面一边播,一边就能改。

性能上,模型依托JoyAI基础大模型底座,在720P分辨率下可稳定跑到30帧实时运算,画面处理没有明显的延迟和卡顿,能跟上常规视频播放的同步修改需求。

行业里不少流式编辑工具只能处理短片段,JoyAI-Video-Edit支持超长视频不间断流式处理,实时更换人物着装、实体物件、整体场景乃至画面艺术风格都能做到。

在OpenVE-Bench评测数据库中,该模型整体表现超过SANA Streaming、LiveEdit等海外主流流式编辑模型,全局风格转换、局部物体增减、字幕智能修改三项优势尤为突出,实时出图画质已经可以对标离线专业剪辑模型。

落地场景分两条线。商用侧,电商直播可以实时切换展示商品和模特穿搭,家装设计能快速替换家具样式与装修风格,影视前期拍摄则可即时调整场景与人物造型,省下的是实景重拍的钱和时间。

工业侧的用法更特别:批量生成机器人训练数据集。真人实操视频一键转化成机械臂作业素材,场景与设备外观可灵活更换,高危、冷门工况那些难采集的训练素材缺口,用这种方式补起来成本要低得多。

这次开源补齐了JoyAI全系列模型在实时视频编辑上的能力。搭配JoyAI-Image-Edit、JoyAI-Echo、JoyAI-VL-Interaction等模型,图像创作、长音视频处理、实时交互、语音合成、机器人动作控制这条链路算是走通了。

模型已在开源模型托管平台与代码托管平台上架,开发者和内容创作者可自行获取部署调试,也能做二次开发。


注:本文中包含AI辅助创作的内容。

声明:包含AI生成内容

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
玩家干过的蠢事:强行打败“无法杀死”的敌人,把系统给干宕机了

玩家干过的蠢事:强行打败“无法杀死”的敌人,把系统给干宕机了

街机时代
2026-08-19 18:06:55
薪水翻10倍!巴莱巴若加盟曼联将改写命运,身价回落至6千万镑

薪水翻10倍!巴莱巴若加盟曼联将改写命运,身价回落至6千万镑

星耀国际足坛
2026-08-20 14:23:29
一家子全是美籍,却还在国内“捞金”,年赚4亿,账上还躺着130亿

一家子全是美籍,却还在国内“捞金”,年赚4亿,账上还躺着130亿

寻墨阁
2026-08-20 10:42:53
读完《羊脂球》发现:跟任何人交往,只要你表现出顺从、听话、胆怯,对方就会瞧不起你,这样只会放大别人的恶意,正确的做法是这样

读完《羊脂球》发现:跟任何人交往,只要你表现出顺从、听话、胆怯,对方就会瞧不起你,这样只会放大别人的恶意,正确的做法是这样

心理观察局
2026-08-20 06:43:05
坐拥105万在华日军的冈村宁次,在得知日本投降后,他的真实反应是啥?

坐拥105万在华日军的冈村宁次,在得知日本投降后,他的真实反应是啥?

磊子讲史
2026-08-19 14:55:49
AC米兰6500万签比利时国脚,门德斯狂吸米兰的血?

AC米兰6500万签比利时国脚,门德斯狂吸米兰的血?

体坛周报
2026-08-20 09:41:21
中报炸雷!10家公司预亏超3000%,最高跌28700%

中报炸雷!10家公司预亏超3000%,最高跌28700%

慧眼看世界哈哈
2026-08-20 08:55:28
陈士章回忆:黄百韬用达姆弹打穿自己脑袋,全怪两个司令一个军长

陈士章回忆:黄百韬用达姆弹打穿自己脑袋,全怪两个司令一个军长

大运河时空
2026-08-18 15:50:03
顶级体坛流氓,逼走陈忠和、刘国梁、郎平,单挑 3 个体坛顶流

顶级体坛流氓,逼走陈忠和、刘国梁、郎平,单挑 3 个体坛顶流

酷侃体坛
2026-08-04 18:30:28
恭喜!全红婵迎来体育局正式任命,亮相全新岗位,薪酬曝光,陈芋汐送上暖心祝福

恭喜!全红婵迎来体育局正式任命,亮相全新岗位,薪酬曝光,陈芋汐送上暖心祝福

比特前沿报
2026-08-19 17:36:11
“龙餐厅”原型刘磊自曝,和演员没共鸣,英美大兵里有他的保护伞

“龙餐厅”原型刘磊自曝,和演员没共鸣,英美大兵里有他的保护伞

嫹笔牂牂
2026-08-18 07:06:29
消费不足,前四次3年就能救,为什么这次8年还救不了?

消费不足,前四次3年就能救,为什么这次8年还救不了?

鲁八两
2026-08-20 03:03:05
哈利梅根官宣带儿女搬回英国,6年加州生活结束,查尔斯国王却措手不及

哈利梅根官宣带儿女搬回英国,6年加州生活结束,查尔斯国王却措手不及

译言
2026-08-20 06:45:19
大S豪宅正式完成过户,具俊晔被曝分走约1.5亿,S妈无份,网友:汪小菲还了多年房贷居然成了外人?

大S豪宅正式完成过户,具俊晔被曝分走约1.5亿,S妈无份,网友:汪小菲还了多年房贷居然成了外人?

In风尚
2026-08-20 06:04:59
许家印本来有自救的机会

许家印本来有自救的机会

中原医生
2026-08-20 13:40:06
窦靖童宋妍霏约会被拍,交往两年感情稳定,宋妍霏已得到王菲认可

窦靖童宋妍霏约会被拍,交往两年感情稳定,宋妍霏已得到王菲认可

花哥扒娱乐
2026-08-19 22:30:12
陪睡陪玩只是开胃菜,舔手指塞拳头、集体嫖娼、背后的事藏不住了

陪睡陪玩只是开胃菜,舔手指塞拳头、集体嫖娼、背后的事藏不住了

北海史记
2026-08-12 19:57:54
意外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

意外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

解说阿洎
2026-08-19 00:01:42
一个山西农民在沙漠睡塑料布,半夜摸到一手水珠,谁料这动作让非洲干旱区都来学他种树

一个山西农民在沙漠睡塑料布,半夜摸到一手水珠,谁料这动作让非洲干旱区都来学他种树

娱乐圈见解说
2026-08-19 14:55:25
今日重要赛事!8月20日,CCTV5、CCTV5+直播节目表

今日重要赛事!8月20日,CCTV5、CCTV5+直播节目表

薇说体育
2026-08-20 10:45:43
2026-08-20 15:39:00
IT时代网 incentive-icons
IT时代网
IT时代网官方账号
6320文章数 120关注度
往期回顾 全部

科技要闻

快手Q2研发狂烧45亿:如何面对双面夹击

头条要闻

许家印判了 与前妻丁玉梅一起拿走恒大分红超500亿元

头条要闻

许家印判了 与前妻丁玉梅一起拿走恒大分红超500亿元

体育要闻

拥有“儿皇梦”的罗德里,为何选择巴萨?

娱乐要闻

汪峰也没想到章子怡,挖到了一条财路

财经要闻

许家印被判处无期 恒大集团被罚88.2亿

汽车要闻

城区油耗3L级 长安CS55蓝鲸超擎混动 7.99万起

态度原创

艺术
手机
本地
公开课
军事航空

艺术要闻

251米!宁波第三高楼来了,长得像棵大树!

手机要闻

9999元起、40万人预约!全球首款"机器人手机"首销,7060mAh大电池+120W快充

本地新闻

先导片|攀登不止,让不同的故事在此连接

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

弹药危机 美步入“战略更年期”的征兆

无障碍浏览 进入关怀版