

Animatabledreamer
简介 :
AnimatableDreamer是一个从单眼视频中生成和重建可动画非刚体3D模型的框架。它能够生成不同类别的非刚体对象,同时遵循从视频中提取的对象运动。关键技术是提出的典范分数蒸馏方法,将生成维度从4D简化到3D,在视频中的不同帧进行降噪,同时在唯一的典范空间内进行蒸馏过程。这样可以保证时间一致的生成和不同姿态下的形态逼真性。借助可微分变形,AnimatableDreamer将3D生成器提升到4D,为非刚体3D模型的生成和重建提供了新视角。此外,与一致性扩散模型的归纳知识相结合,典范分数蒸馏可以从新视角对重建进行正则化,从而闭环增强生成过程。大量实验表明,该方法能够从单眼视频生成高灵活性的文本指导3D模型,同时重建性能优于典型的非刚体重建方法。
需求人群 :
["可动画3D内容生成","虚拟现实应用"]
使用场景
输入文本'一个穿红衣服的松鼠'生成松鼠动画
输入猫咪视频得到猫咪3D模型
输入'机器猫'文本得到机器猫3D动画
产品特色
从单眼视频生成文本指导的可动画3D模型
非刚体3D模型重建
精选AI产品推荐
中文精选

剪映dreamina
剪映Dreamina是抖音旗下的AIGC工具,用户可以根据文本内容生成由AI生成的创意图,支持修整图片大小比例和模板类型。未来会用于抖音的图文或短视频的内容创作,丰富抖音在AI创造方面的内容库。
AI图像生成
9.1M

Outfit Anyone
Outfit Anyone 是一款超高质量虚拟试穿产品,使用户能够在不真实试穿衣物的情况下尝试不同的时尚款式。通过采用两个流的条件扩散模型,Outfit Anyone 能够灵活处理衣物变形,生成更逼真的效果。它具备可扩展性,可以调整姿势和身体形状等因素,适用于动漫角色到真实人物的图像。Outfit Anyone 在各种场景下的表现突出了其实用性和准备好投入实际应用的程度。
AI图像生成
5.7M