

Dualgs
簡介 :
Robust Dual Gaussian Splatting (DualGS) 是一種新型的基於高斯的體積視頻表示方法,它通過優化關節高斯和皮膚高斯來捕捉複雜的人體表演,並實現魯棒的跟蹤和高保真渲染。該技術在SIGGRAPH Asia 2024上展示,能夠實現在低端移動設備和VR頭顯上的即時渲染,提供用戶友好和互動的體驗。DualGS通過混合壓縮策略,實現了高達120倍的壓縮比,使得體積視頻的存儲和傳輸更加高效。
需求人群 :
目標受眾為3D圖形設計師、VR/AR開發者以及視頻製作人員,他們需要一種能夠提供沉浸式體驗並支持即時渲染的體積視頻表示技術。DualGS技術因其高壓縮比和即時渲染能力,特別適合於需要在資源受限的設備上實現高質量視覺效果的場景。
使用場景
在VR頭顯中即時渲染音樂會的表演者
在移動設備上展示高保真的運動員動作捕捉視頻
用於電影製作中的特效預覽,提供逼真的人體動作
產品特色
實現了在低端移動設備和VR頭顯上的即時渲染
採用雙高斯表示方法捕捉複雜的人體表演
通過混合壓縮策略實現高達120倍的壓縮比
優化關節高斯和皮膚高斯來實現魯棒的跟蹤
使用粗到細的策略進行整體運動預測和細粒度優化
支持多視角輸入捕捉挑戰性的人體表演
使用教程
訪問DualGS官方網站以獲取更多信息
下載並安裝所需的軟件或插件,以支持DualGS技術
導入或創建體積視頻內容,並使用DualGS技術進行渲染
調整渲染設置,以適應不同的設備和性能需求
利用DualGS的壓縮功能,優化視頻內容的存儲和傳輸
在VR頭顯或移動設備上體驗沉浸式的體積視頻內容
精選AI產品推薦

Sora
Sora是一個基於大規模訓練的文本控制視頻生成擴散模型。它能夠生成長達1分鐘的高清視頻,涵蓋廣泛的視覺數據類型和分辨率。Sora通過在視頻和圖像的壓縮潛在空間中訓練,將其分解為時空位置補丁,實現了可擴展的視頻生成。Sora還展現出一些模擬物理世界和數字世界的能力,如三維一致性和交互,揭示了繼續擴大視頻生成模型規模來發展高能力模擬器的前景。
AI視頻生成
17.2M

Animate Anyone
Animate Anyone旨在通過驅動信號從靜態圖像生成角色視頻。我們利用擴散模型的力量,提出了一個專為角色動畫量身定製的新框架。為了保持參考圖像中複雜外觀特徵的一致性,我們設計了ReferenceNet來通過空間注意力合併詳細特徵。為了確保可控性和連續性,我們引入了一個高效的姿勢指導器來指導角色的動作,並採用了一種有效的時間建模方法,以確保視頻幀之間的平滑跨幀過渡。通過擴展訓練數據,我們的方法可以為任意角色製作動畫,與其他圖像到視頻方法相比,在角色動畫方面取得了出色的結果。此外,我們在時尚視頻和人類舞蹈合成的基準上評估了我們的方法,取得了最先進的結果。
AI視頻生成
11.8M