
你正在看视频时突然想给主角换件衣服?现在不用暂停重拍了。京东最新开源的JoyAI-Video-Edit模型,能让视频像PS修图一样实时编辑,处理速度达到每秒30帧——这和你看的电影帧率完全同步。
传统视频编辑就像洗胶卷:必须全部拍完才能进暗房修改。而这项技术把"暗房"搬进了播放器,创作者能边播边改。测试显示,在720P画质下,它能实时完成换装、改场景、加字幕等操作,连直播画面都能当场变成动画世界。
更厉害的是它打破了时长限制。此前同类技术最多处理几分钟片段,现在能对长达数小时的视频流持续编辑。家装设计师可以让客户实时切换墙面颜色,影视团队能立刻看到特效合成效果,就像给视频装上了"后悔键"。
在国际权威测试OpenVE-Bench中,这个模型在四项核心任务中全部夺冠。比如把视频里的咖啡杯替换成茶杯时,不仅能精准识别杯子的位置,连热气飘动轨迹都会自动匹配。有工程师尝试用它在直播中把普通街道变成《疯狂动物城》场景,观众完全看不出后期痕迹。
除了影视行业,它还可能改变机器人训练方式。以往训练机械臂抓取需要实拍海量视频,现在只要拍一段人手操作视频,AI就能自动生成不同机器人型号、不同物品的训练素材。京东实验室用这个方法,把10段真实视频扩展出了2000多组训练数据。
当视频编辑变得像打字一样实时,内容创作的门槛正在被彻底踏平。接下来要期待的是:第一批用这个工具的人,会玩出什么我们想不到的新花样?