网易首页 > 网易号 > 正文 申请入驻

实测京东刚开源的“边播边改”AI:能换衣服、戴帽子,适配电商直播

0
分享至

来源:市场资讯

(来源:贝壳财经)

视频创作正在被可实时编辑改写。8月5日,京东宣布开源自研的实时流式视频编辑模型JoyAI-Video-Edit,让用户可以一边观看视频,一边修改人物穿搭、替换商品和场景。

京东方面回应新京报贝壳财经记者,该开源技术向开发者及内容创作者开放。不同于传统“先完成素材再进行后期修改”的视频生产逻辑,新技术实现了“边预览、边创作”的模式,能够适配直播电商、短视频带货、家装设计等电商业务场景。

记者实测:绿色T恤秒变粉色,动作略有延时

新京报贝壳财经记者实测发现,用户打开摄像头,只需在文本框内写入“仅将上衣换为白色圆领纯棉T恤,可见棉质纹理”一类的指令,模型便可在视频播放的同时,对人物外观进行即时替换,无需重新剪辑或等待成片导出。


图/记者实测截图。

在第一组实测中,记者佩戴眼镜、身穿绿色T恤自拍,输入指令“将上衣的描述改为‘粉色’”,模型便实时将画面中人物的整件绿色T恤替换为粉色。记者继续体验,点击“戴上写有‘京东’字样的红色棒球帽与深色镜片墨镜”的指令,右边视频也实时进行了饰品佩戴操作。不过实时生成画面的动作,相比原始视频存在轻微延时。

从实测效果与模型交互界面来看,JoyAI-Video-Edit可覆盖多项高频视频编辑功能:支持实时替换视频人物的衣物颜色、款式与面料;可同步调整发型、帽子、眼镜等配饰,完成人物外貌改造;能够精细调控棉质纹理、皮革反光等服装材质质感;可把写实视频转换成动画、插画、电影等不同艺术风格;也可完成实景与虚拟背景之间的场景置换,实现人物形象向其他真人或虚拟角色的转换,同时还支持参考图驱动换装,上传参考图片即可复刻对应形象到视频主体上。

适配电商直播等场景,实用门槛仍在提示词质量

视频实时编辑首先要解决速度问题。视频由一帧帧连续画面组成,如果模型处理速度跟不上播放速度,就会出现卡顿与延迟。

京东探索研究院相关负责人表示,JoyAI-Video-Edit基于全自研JoyAI-Video模型,在720P分辨率下实现每秒30帧的模型推理速度,能够在保持较高画面清晰度的同时,跟上常见影视视频的播放节奏。

从记者的两组实测看,该模型的“实用门槛”仍在于提示词质量。同一段视频,仅改变上衣颜色的描述(白色/粉色),模型便迅速给到对应的版本;但若提示词过于笼统,如只写“换一身衣服”,模型则可能“擅自”补充未明确要求的配饰、变换发型,甚至影响画面整体风格。换言之,模型听得懂,但听得“有点多”——使用者需要更精细的提示词描述来锁定编辑范围。

记者发现,该模型在体验页给出了一组预设场景按钮:实时换装、参考图换装、风格演绎、外貌改造、质感变身、场景切换、主角变身,记者对照实测发现,这七个场景基本上覆盖了电商直播、家装设计这类对成品确定性要求高的场景。

主流厂商重在“文生视频”,京东押注“边播边改”

新京报贝壳财经记者梳理发现,自2024年OpenAI Sora引爆AI视频生成赛道以来,国内主流厂商在文生视频、图生视频领域能力快速迭代:阿里通义万相2.1于2025年2月全面开源14B与1.3B参数版本;快手可灵AI迭代至2.5Turbo版本,全球用户超4500万,2025年第三季度营收超3亿元;依托Seedance多模态模型的字节即梦AI,与抖音、剪映深度打通,第三方统计显示2025年3月其月活跃用户达893万。

相比之下,主流玩家押注的多为“先有素材再生成”,即上传图片、文字或脚本,一键生成一段新视频;而JoyAI-Video-Edit选择押注“先有视频,再边播边改”。

京东的另一层用意,在于拓展具身智能的训练数据。上述负责人透露,JoyAI-Video-Edit还为具身智能数据大规模合成提供了新的技术路径。机器人训练需要大量物体抓取、搬运与操作视频,但真机数据采集成本较高,危险或少见场景也难以反复采集。依托对场景、物体与画面内容的可控编辑能力,JoyAI-Video-Edit可将人手操作视频转化为机械手或机械臂操作素材,并在保留物体位置、空间关系与动作轨迹的基础上,替换场景、物体与机器人形态,让一段视频扩展出更多训练样本。

新京报贝壳财经记者梳理发现,京东已搭建起面向物理世界的JoyAI模型矩阵:JoyAI‑Image‑Edit负责空间理解与图像编辑,JoyAI‑Echo聚焦长音视频生成,JoyAI‑VL‑Interaction可实现AI持续观察画面并实时反馈,JoyAI‑Talker承担实时语音交互能力,JoyAI‑RA面向机器人操控。此次开源的JoyAI-Video-Edit补齐实时视频编辑能力,也是该矩阵中首个支持任意时长视频流式编辑的模型。

新京报贝壳财经记者 程子姣

编辑 杨娟娟

校对 穆祥桐

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
黄远通主动交代问题,曾在中山任职多年

黄远通主动交代问题,曾在中山任职多年

南方都市报
2026-10-23 21:22:07
网传“白云区存在地下代孕窝点”:院落内外布满监控,藏有地下手术室,约有8张床;广州警方:正由相关行政部门调查中

网传“白云区存在地下代孕窝点”:院落内外布满监控,藏有地下手术室,约有8张床;广州警方:正由相关行政部门调查中

蓬勃新闻
2026-10-24 00:45:32
聚是一盘沙,散是满天星辰!中国男排留洋封神,国家队却持续低迷

聚是一盘沙,散是满天星辰!中国男排留洋封神,国家队却持续低迷

金毛爱女排
2026-10-24 00:00:04
苏提达回泰国后首亮相,一身传统服饰出席活动尽显端庄,泰王也在

苏提达回泰国后首亮相,一身传统服饰出席活动尽显端庄,泰王也在

八八尚语
2026-10-23 21:35:43
42岁知名女星自曝遇到潜规则,唱K时突然被要求伴游,公司同事作为中间人进行游说

42岁知名女星自曝遇到潜规则,唱K时突然被要求伴游,公司同事作为中间人进行游说

叨唠
2026-10-24 04:00:14
男子每天发朋友圈炫耀女儿美貌,老师察觉不对报警,警方推开门傻眼

男子每天发朋友圈炫耀女儿美貌,老师察觉不对报警,警方推开门傻眼

罪案洞察者
2025-07-18 17:04:05
39岁张雪再破天花板!央视正式官宣,德比斯连同整个车坛都沉默了

39岁张雪再破天花板!央视正式官宣,德比斯连同整个车坛都沉默了

探长影视解说
2026-10-22 18:35:13
一女孩在F4演唱会因外形酷似大S引热议,本人回应:“长相是自然的,没有去do脸,也没有化仿妆”

一女孩在F4演唱会因外形酷似大S引热议,本人回应:“长相是自然的,没有去do脸,也没有化仿妆”

韩小娱
2026-10-22 07:02:07
139.1公里/小时,为什么没人信

139.1公里/小时,为什么没人信

爱下厨的阿酾
2026-10-23 07:13:46
1971年,摩洛哥国王寿宴之上,中国大使张伟烈满身鲜血伏桌求生,凭借新四军的经验带着翻译从枪口逃生

1971年,摩洛哥国王寿宴之上,中国大使张伟烈满身鲜血伏桌求生,凭借新四军的经验带着翻译从枪口逃生

唠叨说历史
2026-10-20 11:59:21
掉链子,从绝平到被绝杀!海港B队2-3不敌榜尾杭州队,泰山B队看到反超希望

掉链子,从绝平到被绝杀!海港B队2-3不敌榜尾杭州队,泰山B队看到反超希望

实事球是
2026-10-23 17:28:25
陪玩陪睡仅皮毛!继手伸裤子后,26岁女星再曝猛料,用身体换女主角

陪玩陪睡仅皮毛!继手伸裤子后,26岁女星再曝猛料,用身体换女主角

叨唠
2026-10-24 05:05:08
彭德怀麾下为何名将寥寥?陈毅一语道破:他曾率2万兵刚23万大军

彭德怀麾下为何名将寥寥?陈毅一语道破:他曾率2万兵刚23万大军

吕坾极限手工
2026-10-04 20:01:41
无缘决赛,弗拉门戈队史第2次解放者杯淘汰赛两回合0进球

无缘决赛,弗拉门戈队史第2次解放者杯淘汰赛两回合0进球

懂球帝
2026-10-23 12:15:07
黄智斌履新,曾在佛山工作多年

黄智斌履新,曾在佛山工作多年

南方都市报
2026-10-23 20:13:06
49岁女子煮了存放超2年的核桃,配隔夜剩饭食用,引发重症肝炎合并急性肾衰竭,一度转入ICU

49岁女子煮了存放超2年的核桃,配隔夜剩饭食用,引发重症肝炎合并急性肾衰竭,一度转入ICU

云南网络广播电视台
2026-10-21 20:31:39
英国小两口在拼多多买了个花园拱门,收到包裹懵逼了!网友:这就是为什么有些人不该获得选举权的原因...

英国小两口在拼多多买了个花园拱门,收到包裹懵逼了!网友:这就是为什么有些人不该获得选举权的原因...

悦居英国
2026-10-16 18:52:20
事关台北选战,神秘操盘者出现,蓝白台北联手,摆了沈伯洋一道

事关台北选战,神秘操盘者出现,蓝白台北联手,摆了沈伯洋一道

老黯谈娱
2026-10-24 01:46:49
吴仪终身未嫁真相曝光:不是独身主义,一句话让谣言者沉默

吴仪终身未嫁真相曝光:不是独身主义,一句话让谣言者沉默

笔墨V
2026-10-14 16:44:03
再见了,唐国强,再见了,古月,中国电视已迎“新特型演员”时代

再见了,唐国强,再见了,古月,中国电视已迎“新特型演员”时代

陈意小可爱
2026-10-23 16:13:25
2026-10-24 06:00:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
5179897文章数 9850关注度
往期回顾 全部

科技要闻

抢运营商饭碗!马斯克又有大动作

头条要闻

美国稀土大项目黄了 稀土产业遭遇重大挫折

头条要闻

美国稀土大项目黄了 稀土产业遭遇重大挫折

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

黎纪君晒与刘恺威合照 恋情后首次同框

财经要闻

叫"保障"不叫"保险":租车平台的文字游戏

汽车要闻

设计换新/智舱升级 2027款博越限时价7.89万起

态度原创

时尚
本地
旅游
教育
军事航空

好看,从来不止身上这一处

本地新闻

这么近,那么美,周末赴贺州丨大湾区后花园

旅游要闻

凤瞰潍坊 文脉千秋丨松园子古民居:完整还原明清大家族生活起居形态

教育要闻

#解码云南 | 从“有学上”到“上好学” #一起解码云南

军事要闻

美国或于明年开始扩建格陵兰岛军事设施

无障碍浏览 进入关怀版