智能日报
业界资讯 智能手机 电脑硬件 平板电脑 智能手表 智能家电 耳机音频 笔记本 热点资讯

京东开源160亿参数模型:实时视频编辑新突破,流式赛道断层领先

2026-08-07来源:快讯编辑:瑞雪

AI视频领域正迎来一场技术革新,京东近日开源的JoyAI-Video-Edit模型成为焦点。这款模型首次实现了"流式架构+实时速度+可用质量"的突破,在视频编辑赛道开辟了新路径。与传统离线模型不同,它能够直接处理实时视频流,支持直播、视频通话等动态场景的即时编辑。

该模型在720P分辨率下达到每秒30帧的推理速度,系统端到端稳定运行在24FPS,支持无限时长的连续编辑。用户通过自然语言指令即可实现实时视觉特效,例如将人物变老、切换场景风格或替换物体形态。在电商直播场景中,主播可动态更换服装配色、调整背景布置,系统能根据不同观众需求生成个性化画面版本。

技术实现层面,研发团队构建了包含MLLM条件编码器、因果视频VAE和160亿参数多模态扩散Transformer的架构体系。通过SA-DMD训练方法将单帧处理步骤从十余次压缩至两次,在Nvidia B200 GPU上实现226毫秒的端到端延迟。区别于其他流式模型通过缩小参数规模提升速度的做法,该模型在保持160亿参数规模的同时,将分辨率提升至720P,处理速度较同类产品提升1.4至2倍。

针对长视频编辑常见的画面漂移问题,团队提出"有界KV状态推理"机制。该技术通过限制模型记忆容量,仅保留最近处理片段和首帧作为参考,使计算资源消耗与视频时长解耦。配合专门设计的长视频训练策略,模型在连续处理数小时视频时仍能保持画面稳定性,解决了自回归模型误差累积导致的画面崩坏难题。

在OpenVE-Bench通用基准测试中,该模型以3.60分领先所有流式编辑模型,在局部删除等子任务中超越商业离线模型。LongV2VBench长视频专项测试显示,其总分较第二名提升1.59分,处理速度达到30.19FPS。人类评估盲测中,面对四个流式竞品模型,该模型获得最高90%的偏好率,与顶级离线模型Bernini-R的对比中也取得微弱优势。

这项技术正在重塑内容生产流程。传统视频制作中反复渲染的等待环节被消除,创作者可实时调整参数并立即看到效果。在电商领域,单次拍摄即可生成多版本商品展示视频,系统根据用户画像动态切换画面元素。更深远的影响在于,该模型在摄像头与显示屏幕之间构建了可编程语义层,使视频编辑能够理解画面内容并保持跨帧一致性。

京东的技术布局已延伸至具身智能领域。针对机器人训练数据稀缺的痛点,该模型可快速将人类操作视频转换为机械臂训练素材,完整保留物体空间关系和动作轨迹。这与京东正在构建的JoyAI模型矩阵形成协同效应,涵盖视觉交互、语音对话、机器人操控等多个维度,为其物流仓储、直播电商等业务场景提供技术支撑。

海信A10墨水屏手机8月28日发布:双芯方案加持 流畅度与显示效果再升级
IT之家 8 月 7 日消息,海信官方今天在小红书平台公布 A10 墨水屏手机的更新参数,新机将于 8 月 28 日正式发布。据介绍,这款手机采用高通 QCM6690 企业级平台 + 元太 T2000 硬件…

2026-08-07

68岁教师于龙:以好奇为帆,在AI浪潮中探索大模型新天地
尤其是在人工智能快速发展的今天,作为一名教育工作者,我更希望能够主动了解这些新技术,而不是只是听别人介绍。 我知道AI可以帮助人完成一些任务,也看到很多人在使用AI提高效率,但大模型背后的原理是什么,它为什…

2026-08-07

高驰Pace 4 Pro运动手表现身印尼数据库,型号W337功能升级引期待
IT之家 8 月 6 日消息,科技媒体 the5krunner 昨日(8 月 5 日)发布博文,报道称高驰(Coros)Pace 4 Pro运动手表现身印度尼西亚官方 e-Sertifikasi DJID …

2026-08-07

三星ISOCELL HPC图像传感器登场:2亿像素大底,多技术加持提升成像品质
该传感器拥有2亿像素,感光元件尺寸达到1/1.3英寸,原生支持16bit RAW输出,并首创DeepPix架构,带来更为宽广的动态范围表现。 该传感器可根据光线环境灵活输出不同像素的样张,在充足光照下可输出2…

2026-08-07

小米18标准版配置亮点多:双2亿像素+骁龙8 Elite Gen6+7200mAh大电池
受内存成本上涨影响,小米18系列将打破往年全系同台惯例,9月底将率先发布Pro和Pro Max机型,标准版则延后至2027年初(春节前)单独上市。在影像方面,该机或成为首款搭载双2亿像素方案的标准版新机,预计…

2026-08-07

MIT突破芯片极限:先造芯片后放分子,实现千个分子器件高良率制造
过去几十年,研究人员一直在寻找新的器件材料,希望突破硅所面临的物理和制造极限,分子电子学(MolecularElectronics)便是其中一条重要探索方向。 分子电子学过去长期停留在单器件研究阶段,很大程…

2026-08-07

小米空调强劲风系列:专为火炉城市打造,极端高温下也能稳稳控温
单联瑜进一步解释说,该空调的“强劲”并非简单把风开大、把温度调低,而是从底层重做了一套应对极端环境的能力。单联瑜透露,小米强劲风系列空调在今年的吐鲁番空调夏测中,接受了极端环境的 2208 小时持续大“烤…

2026-08-07

大厂AI人才争夺白热化:秋招提前“抢跑” 复合型人才成新宠
本周,字节跳动同样在“公司不同业务场景都有AI相关岗位需求”的背景下早早启动了2027年校园招聘,本次招聘中,技术和产品岗位需求占比超过70%,字节表示,产品类岗位需求增加20%,其中超一半为AI产品,同时…

2026-08-07