# 神經渲染

XHand是由浙江大學開發的一個即時生成高細節表達性手勢頭像的模型。它通過多視角視頻創建，並利用MANO姿勢參數生成高細節的網格和渲染圖，實現了在不同姿勢下的即時渲染。XHand在圖像真實感和渲染質量上具有顯著優勢，特別是在擴展現實和遊戲領域，能夠即時渲染出逼真的手部圖像。

這款產品是一種3D GAN技術，通過學習基於神經體積渲染的方法，能夠以前所未有的細節解析細粒度的3D幾何。產品採用學習型採樣器，加速3D GAN訓練，使用更少的深度採樣，實現在訓練和推斷過程中直接渲染完整分辨率圖像的每個像素，同時學習高質量的表面幾何，合成高分辨率3D幾何和嚴格視角一致的圖像。產品在FFHQ和AFHQ上展示了最先進的3D幾何質量，為3D GAN中的無監督學習建立了新的標準。

NeROIC是一種從在線圖像集合中獲取物體表示的新方法，可以捕捉具有不同相機、光照和背景的照片中任意物體的高質量幾何和材質屬性。它可以用於新視角合成、重新照明和和諧背景合成等物體中心渲染應用。通過擴展神經輻射場的多階段方法，我們首先推斷表面幾何並改進粗略估計的初始相機參數，同時利用粗略的前景物體掩碼來提高訓練效率和幾何質量。我們還引入了一種穩健的法線估計技術，可以消除幾何噪聲的影響，同時保留關鍵細節。最後，我們提取表面材質屬性和環境光照，用球諧函數表示，並處理瞬態元素，如銳利陰影。這些組件的結合形成了一個高度模塊化和高效的物體獲取框架。廣泛的評估和比較證明了我們的方法在捕捉用於渲染應用的高質量幾何和外觀屬性方面的優勢。

Luma AI是一家專注於AI的技術公司，通過其創新技術，用戶可以利用手機快速生成所需的3D模型。公司由擁有豐富3D計算機視覺經驗的團隊成立，其技術基於Neural Radiance Fields，能夠基於少量2D圖像對3D場景進行建模。Dream Machine是一個AI模型，能夠直接從文本和圖像快速生成高質量的逼真視頻。它是一個高度可擴展且高效的transformer模型，專門針對視頻進行訓練，能夠生成物理上準確、一致且充滿事件的鏡頭。Dream Machine是構建通用想象力引擎的第一步，現已對所有人開放。