实测京东刚开源的“边播边改”AI:能换衣服、戴帽子,适配电商直播
创始人
2026-08-06 14:41:36
0

视频创作正在被可实时编辑改写。8月5日,京东宣布开源自研的实时流式视频编辑模型JoyAI-Video-Edit,让用户可以一边观看视频,一边修改人物穿搭、替换商品和场景。

京东方面回应新京报贝壳财经记者,该开源技术向开发者及内容创作者开放。不同于传统“先完成素材再进行后期修改”的视频生产逻辑,新技术实现了“边预览、边创作”的模式,能够适配直播电商、短视频带货、家装设计等电商业务场景。

记者实测:绿色T恤秒变粉色,动作略有延时

新京报贝壳财经记者实测发现,用户打开摄像头,只需在文本框内写入“仅将上衣换为白色圆领纯棉T恤,可见棉质纹理”一类的指令,模型便可在视频播放的同时,对人物外观进行即时替换,无需重新剪辑或等待成片导出。

图/记者实测截图。

在第一组实测中,记者佩戴眼镜、身穿绿色T恤自拍,输入指令“将上衣的描述改为‘粉色’”,模型便实时将画面中人物的整件绿色T恤替换为粉色。记者继续体验,点击“戴上写有‘京东’字样的红色棒球帽与深色镜片墨镜”的指令,右边视频也实时进行了饰品佩戴操作。不过实时生成画面的动作,相比原始视频存在轻微延时。

从实测效果与模型交互界面来看,JoyAI-Video-Edit可覆盖多项高频视频编辑功能:支持实时替换视频人物的衣物颜色、款式与面料;可同步调整发型、帽子、眼镜等配饰,完成人物外貌改造;能够精细调控棉质纹理、皮革反光等服装材质质感;可把写实视频转换成动画、插画、电影等不同艺术风格;也可完成实景与虚拟背景之间的场景置换,实现人物形象向其他真人或虚拟角色的转换,同时还支持参考图驱动换装,上传参考图片即可复刻对应形象到视频主体上。

适配电商直播等场景,实用门槛仍在提示词质量

视频实时编辑首先要解决速度问题。视频由一帧帧连续画面组成,如果模型处理速度跟不上播放速度,就会出现卡顿与延迟。

京东探索研究院相关负责人表示,JoyAI-Video-Edit基于全自研JoyAI-Video模型,在720P分辨率下实现每秒30帧的模型推理速度,能够在保持较高画面清晰度的同时,跟上常见影视视频的播放节奏。

从记者的两组实测看,该模型的“实用门槛”仍在于提示词质量。同一段视频,仅改变上衣颜色的描述(白色/粉色),模型便迅速给到对应的版本;但若提示词过于笼统,如只写“换一身衣服”,模型则可能“擅自”补充未明确要求的配饰、变换发型,甚至影响画面整体风格。换言之,模型听得懂,但听得“有点多”——使用者需要更精细的提示词描述来锁定编辑范围。

记者发现,该模型在体验页给出了一组预设场景按钮:实时换装、参考图换装、风格演绎、外貌改造、质感变身、场景切换、主角变身,记者对照实测发现,这七个场景基本上覆盖了电商直播、家装设计这类对成品确定性要求高的场景。

主流厂商重在“文生视频”,京东押注“边播边改”

新京报贝壳财经记者梳理发现,自2024年OpenAI Sora引爆AI视频生成赛道以来,国内主流厂商在文生视频、图生视频领域能力快速迭代:阿里通义万相2.1于2025年2月全面开源14B与1.3B参数版本;快手可灵AI迭代至2.5Turbo版本,全球用户超4500万,2025年第三季度营收超3亿元;依托Seedance多模态模型的字节即梦AI,与抖音、剪映深度打通,第三方统计显示2025年3月其月活跃用户达893万。

相比之下,主流玩家押注的多为“先有素材再生成”,即上传图片、文字或脚本,一键生成一段新视频;而JoyAI-Video-Edit选择押注“先有视频,再边播边改”。

京东的另一层用意,在于拓展具身智能的训练数据。上述负责人透露,JoyAI-Video-Edit还为具身智能数据大规模合成提供了新的技术路径。机器人训练需要大量物体抓取、搬运与操作视频,但真机数据采集成本较高,危险或少见场景也难以反复采集。依托对场景、物体与画面内容的可控编辑能力,JoyAI-Video-Edit可将人手操作视频转化为机械手或机械臂操作素材,并在保留物体位置、空间关系与动作轨迹的基础上,替换场景、物体与机器人形态,让一段视频扩展出更多训练样本。

新京报贝壳财经记者梳理发现,京东已搭建起面向物理世界的JoyAI模型矩阵:JoyAI‑Image‑Edit负责空间理解与图像编辑,JoyAI‑Echo聚焦长音视频生成,JoyAI‑VL‑Interaction可实现AI持续观察画面并实时反馈,JoyAI‑Talker承担实时语音交互能力,JoyAI‑RA面向机器人操控。此次开源的JoyAI-Video-Edit补齐实时视频编辑能力,也是该矩阵中首个支持任意时长视频流式编辑的模型。

新京报贝壳财经记者 程子姣

编辑 杨娟娟

校对 穆祥桐

相关内容

A股“人形机器人第一股”即...
2026年,机器人产业迎来一个具有标志性意义的资本事件。 7月1日...
2026-08-06 15:53:49
黑龙江斩获两项冠军!202...
8月4日晚,2026年全国残疾人冰壶锦标赛在哈尔滨市平房区冰壶馆完...
2026-08-06 15:52:31
曝韩国短道速滑名将违反兴奋...
图源:新华社 据韩国媒体报道称,韩国男子短道速滑的王牌选手林钟彦因...
2026-08-06 15:51:04
沈阳企业为什么需要 GEO...
现象已经很明显:在沈阳的写字楼、商圈、工厂里,越来越多的采购决策从...
2026-08-06 15:49:58
原创 ...
在美东时间8月6日凌晨,田径世青赛将在美国俄勒冈特别的尤金开启激烈...
2026-08-06 15:48:35
原创 ...
由我国牵头的国际标准《区块链和分布式记账技术 区块链即服务的技术框...
2026-08-06 15:48:06
(体育)田径——国家集训队...
近日,国家田径集训队在北京开展训练,备战将于9月举行的爱知·名古屋...
2026-08-06 15:47:40
深耕青训结硕果!省运会田径...
齐鲁晚报·齐鲁壹点 冯子涵 济南小将在省运会赛出风采。 炎炎夏日...
2026-08-06 15:47:08
新探索“金融+体育+公益”...
半岛网8月4日讯 (记者 孙贴静)近日,山东省第二十六届运动会“临...
2026-08-06 15:46:25

热门资讯

A股“人形机器人第一股”即将诞... 2026年,机器人产业迎来一个具有标志性意义的资本事件。 7月1日,中国证监会正式发布批复,同意宇树...
沈阳企业为什么需要 GEO 优... 现象已经很明显:在沈阳的写字楼、商圈、工厂里,越来越多的采购决策从 "问熟人" 变成了 "问 AI"...
原创 区... 由我国牵头的国际标准《区块链和分布式记账技术 区块链即服务的技术框架和功能要求》,近日在国际标准化组...
如何选择价格透明的黄金回收机构 近年来随着贵金属价格波动,不少持有黄金相关资产的人群都有处置变现的需求:45-70岁的中老年投资者早...
SpaceX财报电话会万字实录... 作者 | 辰辰 SpaceX上市后的第一次电话会议,马斯克把万亿营收的时间表往前提了一年。 Q2营收...
WRC 2026丨清研精准创始... 2026世界机器人大会将于8月19日至23日北人亦创国际会展中心(世界机器人大会展馆)正式举办。 作...
美国海关已退回约1000亿美元... 当地时间8月4日,美国国土安全部下属海关与边境保护局官员向美国国际贸易法院披露的数据显示,美国海关已...
INC巴特朗菲教授案例分享:1... 6年前,年仅7岁的然然被查出患有脑干-颈髓巨大胶质瘤,此后除了接受活检手术之外,未采取其他任何干预措...
重庆江北哪里能找到支持上门回收... 黄金上门回收服务的市场背景 近年来黄金的保值属性受到更多消费者关注,不少家庭都存有闲置的黄金首饰、投...
【创投】巴西AI独角兽获1.2... 文章来源:巴西互联网创业