2VEdit :一种基于图像到视频扩散模型视频编辑方法

只需修改视频的第一帧,然后这些修改将自动传播到整个视频
例如你想给视频的对象修改衣服、发型、戴上墨镜,只需要使用Photoshop或其他 AI 图像工具修改第一帧,即可传导到整个视频。
从而达到快速修改整个视频的目的。
I2VEdit 能够保持视频中的时间和运动一致性。即便进行了复杂的局部或全局编辑,视频中的物体运动轨迹依然能与原视频保持一致,避免常见的视频编辑中物体运动不自然或失真的问题。
2VEdit 支持:
局部和全局编辑:可以针对视频中的某个区域进行修改,对整个视频进行风格变换或外观统一的编辑。
虚拟试穿:你可以修改视频中人物的穿着,类似于在视频里做衣物的虚拟试穿。
主体替换:这个功能允许你将视频中的主体替换为其他人或物体。
风格转换:你可以改变视频的视觉风格,比如从现实风格变为卡通风格。
局部编辑任务中,I2VEdit 的外观一致性、运动保持以及细节生成能力显著优于其他方法。
通过跳跃间隔交叉注意力减少了质量下降问题,并保持了视频的视觉一致性和流畅性。
详细介绍:https://xiaohu.ai/p/14198
项目地址及演示:https://i2vedit.github.io
论文:https://arxiv.org/pdf/2405.16537