# 3D動畫

GaussianSpeech是一種新穎的方法，它能夠從語音信號中合成高保真度的動畫序列，創建逼真、個性化的3D人頭化身。該技術通過結合語音信號與3D高斯繪製技術，捕捉人類頭部表情和細節動作，包括皮膚皺褶和更細微的面部運動。GaussianSpeech的主要優點包括即時渲染速度、自然的視覺動態效果，以及能夠呈現多樣化的面部表情和風格。該技術背後是大規模多視角音頻-視覺序列數據集的創建，以及音頻條件變換模型的開發，這些模型能夠直接從音頻輸入中提取唇部和表情特徵。

Vmotionize是一個領先的AI動畫和3D動畫軟件，它能夠將視頻、音樂、文本、圖片等內容轉換成令人驚歎的3D動畫。該平臺通過先進的AI動畫和動作捕捉工具，使得高質量的3D內容和動態圖形更加易於獲取。Vmotionize通過創新的方式為獨立創作者和全球品牌提供了一個全新的平臺，讓他們可以共同通過人工智能和人類想象力來實現創意、分享故事和構建虛擬世界。

DrawingSpinUp是一個創新的系統，它能夠將單一角色繪畫轉換為3D動畫。該技術通過去除視圖依賴的輪廓線並重新渲染，以及基於骨架的細化變形算法，解決了業餘角色繪畫在外觀和幾何形狀上的挑戰。它不僅提高了角色繪畫的視覺效果，還賦予了繪畫以動態的生命力，使其能夠自由旋轉、跳躍甚至表演街舞。

Animate3D是一個創新的框架，用於為任何靜態3D模型生成動畫。它的核心理念包括兩個主要部分：1) 提出一種新的多視圖視頻擴散模型（MV-VDM），該模型基於靜態3D對象的多視圖渲染，並在我們提供的大規模多視圖視頻數據集（MV-Video）上進行訓練。2) 基於MV-VDM，引入了一個結合重建和4D得分蒸餾採樣（4D-SDS）的框架，利用多視圖視頻擴散先驗來為3D對象生成動畫。Animate3D通過設計新的時空注意力模塊來增強空間和時間一致性，並通過多視圖渲染來保持靜態3D模型的身份。此外，Animate3D還提出了一個有效的兩階段流程來為3D模型生成動畫：首先從生成的多視圖視頻中直接重建運動，然後通過引入的4D-SDS來細化外觀和運動。

SC-GS是一種新型表示技術,將動態場景的運動和外觀分別用稀疏控制點和密集高斯函數表示。它使用少量控制點學習緊湊的6自由度變換基,這些基可通過插值權重在局部插值,得到3D高斯函數的運動場。它採用變形MLP預測每個控制點的時變6自由度變換,降低學習複雜度,增強學習能力,實現時空連貫的運動模式。同時聯合學習3D高斯函數、控制點的規範空間位置和變形MLP,重建3D場景的外觀、幾何和動態。在訓練過程中,控制點的位置和數量會自適應調整以適應不同區域的運動複雜度,並採用盡可能剛性的損失函數強制運動的空間連續性和局部剛性。由於運動表示的顯式稀疏性和外觀分離,該方法實現了用戶控制的運動編輯,同時保留高保真度外觀。大量實驗表明,該方法在新視圖合成和高速渲染方面優於現有方法,並支持新的保留外觀的運動編輯應用。

Captury提供先進的無標記運動捕捉解決方案,可精準可靠地跟蹤多個演員同時進行的全身動作、手指移動和麵部表情。我們的解決方案旨在提高運動捕捉的效率,同時降低所涉及的時間和成本。Captury可應用於3D遊戲開發、虛擬效果/電影/廣告領域、虛擬現實、即時虛擬/基於位置的娛樂、遊戲內玩家跟蹤以及生命科學等領域。主要產品包括即時處理CapturyLive、CapturyInGame、CapturyFace,以及後期處理CapturyStudio和CapturyDome等。

Cartwheel是一個創新的文本轉3D動畫工具，用戶通過輸入文字提示即可生成適用於視頻、遊戲、電影、廣告、社交或VR項目的3D動畫角色。其靈活性和易用性讓用戶能夠輕鬆生成各種動作，並支持導出到任何3D程序中進行編輯。目前處於測試階段，用戶需要排隊等待使用。

Move API能夠將包含人體動作的視頻轉換為3D動畫資產，支持將視頻文件轉換為usdz、usdc和fbx文件格式，並提供預覽視頻。適用於集成到生產工作流程軟件、增強應用動作捕捉能力或創造全新體驗。

本產品基於擴散模型的框架，用於從單張圖像生成給定目標3D運動序列的人物動畫。其核心組件包括學習有關人體和服裝不可見部分的先驗知識，並以適當的服裝和紋理渲染新的身體姿勢。我們訓練模型在紋理地圖空間上，使其對姿勢和視角不變，從而更加高效。此外，我們開發了一個基於擴散的渲染管線，由3D人體姿勢控制，可產生逼真的人物渲染圖像。我們的方法能夠生成符合3D姿勢目標的圖像序列，並在視覺上與輸入圖像相似。同時，3D控制允許生成各種合成攝像機軌跡來渲染人物。實驗證明，相比先前的方法，我們的方法能夠生成持續運動和複雜姿勢的圖像序列。