

Flowvid
简介 :
FlowVid 是一个光流引导的视频合成模型,通过利用光流的空间和时间信息,实现视频帧之间的时序一致性。它可以与现有的图像合成模型无缝配合,实现多种修改操作,包括风格化、对象交换和局部编辑等。FlowVid 生成速度快,4 秒、30FPS、512×512 分辨率的视频只需 1.5 分钟,比 CoDeF、Rerender 和 TokenFlow 分别快 3.1 倍、7.2 倍和 10.5 倍。用户评估中,FlowVid 的质量得分为 45.7%,明显优于 CoDeF(3.5%)、Rerender(10.2%)和 TokenFlow(40.4%)。
需求人群 :
FlowVid 可以应用于视频合成领域,用于生成具有时序一致性的视频,并且可以通过修改首帧图像,实现风格化、对象交换和局部编辑等功能。
使用场景
将某个视频的风格转换为卡通风格
将视频中的人物替换为其他人
在视频中的特定区域进行局部编辑
产品特色
光流引导视频合成
支持风格化、对象交换和局部编辑
生成速度快
精选AI产品推荐

Sora
Sora是一个基于大规模训练的文本控制视频生成扩散模型。它能够生成长达1分钟的高清视频,涵盖广泛的视觉数据类型和分辨率。Sora通过在视频和图像的压缩潜在空间中训练,将其分解为时空位置补丁,实现了可扩展的视频生成。Sora还展现出一些模拟物理世界和数字世界的能力,如三维一致性和交互,揭示了继续扩大视频生成模型规模来发展高能力模拟器的前景。
AI视频生成
17.2M

Animate Anyone
Animate Anyone旨在通过驱动信号从静态图像生成角色视频。我们利用扩散模型的力量,提出了一个专为角色动画量身定制的新框架。为了保持参考图像中复杂外观特征的一致性,我们设计了ReferenceNet来通过空间注意力合并详细特征。为了确保可控性和连续性,我们引入了一个高效的姿势指导器来指导角色的动作,并采用了一种有效的时间建模方法,以确保视频帧之间的平滑跨帧过渡。通过扩展训练数据,我们的方法可以为任意角色制作动画,与其他图像到视频方法相比,在角色动画方面取得了出色的结果。此外,我们在时尚视频和人类舞蹈合成的基准上评估了我们的方法,取得了最先进的结果。
AI视频生成
11.8M