

Dualgs
简介 :
Robust Dual Gaussian Splatting (DualGS) 是一种新型的基于高斯的体积视频表示方法,它通过优化关节高斯和皮肤高斯来捕捉复杂的人体表演,并实现鲁棒的跟踪和高保真渲染。该技术在SIGGRAPH Asia 2024上展示,能够实现在低端移动设备和VR头显上的实时渲染,提供用户友好和互动的体验。DualGS通过混合压缩策略,实现了高达120倍的压缩比,使得体积视频的存储和传输更加高效。
需求人群 :
目标受众为3D图形设计师、VR/AR开发者以及视频制作人员,他们需要一种能够提供沉浸式体验并支持实时渲染的体积视频表示技术。DualGS技术因其高压缩比和实时渲染能力,特别适合于需要在资源受限的设备上实现高质量视觉效果的场景。
使用场景
在VR头显中实时渲染音乐会的表演者
在移动设备上展示高保真的运动员动作捕捉视频
用于电影制作中的特效预览,提供逼真的人体动作
产品特色
实现了在低端移动设备和VR头显上的实时渲染
采用双高斯表示方法捕捉复杂的人体表演
通过混合压缩策略实现高达120倍的压缩比
优化关节高斯和皮肤高斯来实现鲁棒的跟踪
使用粗到细的策略进行整体运动预测和细粒度优化
支持多视角输入捕捉挑战性的人体表演
使用教程
访问DualGS官方网站以获取更多信息
下载并安装所需的软件或插件,以支持DualGS技术
导入或创建体积视频内容,并使用DualGS技术进行渲染
调整渲染设置,以适应不同的设备和性能需求
利用DualGS的压缩功能,优化视频内容的存储和传输
在VR头显或移动设备上体验沉浸式的体积视频内容
精选AI产品推荐

Sora
Sora是一个基于大规模训练的文本控制视频生成扩散模型。它能够生成长达1分钟的高清视频,涵盖广泛的视觉数据类型和分辨率。Sora通过在视频和图像的压缩潜在空间中训练,将其分解为时空位置补丁,实现了可扩展的视频生成。Sora还展现出一些模拟物理世界和数字世界的能力,如三维一致性和交互,揭示了继续扩大视频生成模型规模来发展高能力模拟器的前景。
AI视频生成
17.2M

Animate Anyone
Animate Anyone旨在通过驱动信号从静态图像生成角色视频。我们利用扩散模型的力量,提出了一个专为角色动画量身定制的新框架。为了保持参考图像中复杂外观特征的一致性,我们设计了ReferenceNet来通过空间注意力合并详细特征。为了确保可控性和连续性,我们引入了一个高效的姿势指导器来指导角色的动作,并采用了一种有效的时间建模方法,以确保视频帧之间的平滑跨帧过渡。通过扩展训练数据,我们的方法可以为任意角色制作动画,与其他图像到视频方法相比,在角色动画方面取得了出色的结果。此外,我们在时尚视频和人类舞蹈合成的基准上评估了我们的方法,取得了最先进的结果。
AI视频生成
11.8M