拾雨 (@c519127) 在 视频能“边播边改”:京东开源自研 JoyAI-Video-Edit 模型,各项指标全球领先 中发帖
IT之家 8 月 5 日消息,京东今日宣布开源自研的实时流式视频编辑模型 JoyAI-Video-Edit,用户可以一边观看视频,一边修改人物与场景,让视频创作从“先有素材再修改”变为可实时互动编辑。
京东官方表示,在流式实时视频编辑方向,JoyAI-Video-Edit 对比当前业内代表性模型,各项指标全面领先,达到世界一流水平。
视频实时编辑首先要解决速度问题。视频由一帧帧连续画面组成,如果模型处理速度跟不上播放速度,就会出现卡顿与延迟。JoyAI-Video-Edit 基于全自研 JoyAI-Video 模型,在 720P 分辨率下实现每秒 30 帧的模型推理速度,能够在保持较高画面清晰度的同时,跟上常见影视视频的播放节奏。
视频长度也是流式编辑的一道门槛。此前的流式编辑模型只能处理几秒或分钟级片段,而 JoyAI-Video-Edit 支持任意时长的稳定流式编辑,可以随着视频...