

Liveportrait
简介 :
LivePortrait是一个基于隐式关键点框架的人像动画生成模型,它通过使用单一源图像作为外观参考,并从驱动视频、音频、文本或生成中获取动作(如面部表情和头部姿势),来合成逼真的视频。该模型不仅在计算效率和可控性之间取得了有效平衡,而且通过扩展训练数据、采用混合图像-视频训练策略、升级网络架构以及设计更好的运动转换和优化目标,显著提高了生成质量和泛化能力。
需求人群 :
目标受众包括动画制作者、游戏开发者、电影后期制作人员等,他们需要快速生成逼真的人像动画,用于角色设计、广告制作或其他视觉媒体项目。LivePortrait因其高效和可控性,特别适合需要快速迭代和精确控制动画细节的专业用户。
使用场景
动画制作者使用LivePortrait快速生成角色动画,用于动画电影的预览。
游戏开发者利用LivePortrait为游戏角色创建逼真的面部表情。
广告制作团队使用LivePortrait为产品广告生成吸引人的动态人像。
产品特色
从静态图像生成不同风格(现实、油画、雕塑、3D渲染)的人像动画
通过Kling生成的源视频进行人像视频编辑
基于给定的标量控制眼睛和嘴唇的开合程度
通过微调动物数据,实现对猫、狗和熊猫的精确驱动
在RTX 4090 GPU上以PyTorch实现12.8ms的生成速度
使用教程
1. 访问LivePortrait的网页链接。
2. 阅读产品介绍和功能概述。
3. 根据需求选择相应的功能模块,如人像动画生成或视频编辑。
4. 上传源图像或视频,并根据需要调整控制参数。
5. 利用LivePortrait的模型生成动画或编辑视频。
6. 下载生成的动画或编辑后的视频,用于进一步的项目开发或展示。
精选AI产品推荐

Sora
Sora是一个基于大规模训练的文本控制视频生成扩散模型。它能够生成长达1分钟的高清视频,涵盖广泛的视觉数据类型和分辨率。Sora通过在视频和图像的压缩潜在空间中训练,将其分解为时空位置补丁,实现了可扩展的视频生成。Sora还展现出一些模拟物理世界和数字世界的能力,如三维一致性和交互,揭示了继续扩大视频生成模型规模来发展高能力模拟器的前景。
AI视频生成
17.2M

Animate Anyone
Animate Anyone旨在通过驱动信号从静态图像生成角色视频。我们利用扩散模型的力量,提出了一个专为角色动画量身定制的新框架。为了保持参考图像中复杂外观特征的一致性,我们设计了ReferenceNet来通过空间注意力合并详细特征。为了确保可控性和连续性,我们引入了一个高效的姿势指导器来指导角色的动作,并采用了一种有效的时间建模方法,以确保视频帧之间的平滑跨帧过渡。通过扩展训练数据,我们的方法可以为任意角色制作动画,与其他图像到视频方法相比,在角色动画方面取得了出色的结果。此外,我们在时尚视频和人类舞蹈合成的基准上评估了我们的方法,取得了最先进的结果。
AI视频生成
11.8M