%20--%3e%3cdefs%3e%3cstyle%3e%20.st0%20{%20fill:%20%23061b40;%20}%20.st1%20{%20fill:%20%23306af1;%20}%20.st2%20{%20fill:%20%235ce5cf;%20}%20%3c/style%3e%3c/defs%3e%3cg%3e%3cpath%20class='st0'%20d='M55,10.5h9v3h-9v9h12V7.5h-12v3ZM64,19.5h-6v-3h6v3Z'/%3e%3cpolygon%20class='st0'%20points='69%2016.5%2078%2016.5%2078%2019.5%2069%2019.5%2069%2022.5%2081%2022.5%2081%2013.5%2072%2013.5%2072%2010.5%2081%2010.5%2081%207.5%2069%207.5%2069%2016.5'/%3e%3cpolygon%20class='st0'%20points='95%2010.5%2095%207.5%2083%207.5%2083%2022.5%2095%2022.5%2095%2019.5%2086%2019.5%2086%2016.5%2095%2016.5%2095%2013.5%2086%2013.5%2086%2010.5%2095%2010.5'/%3e%3cpath%20class='st0'%20d='M40,1.5v21h11.6l1.4-1.4v-7.6h0c0,0-1.4-1.5-1.4-1.5l1.4-1.4V2.9l-1.4-1.4h-11.6ZM50,19.5h-7v-6h7v6ZM50,10.5h-7v-6h7v6Z'/%3e%3c/g%3e%3cpath%20class='st1'%20d='M23.1,24L14.7,4.8l-4.9,11.2h3.8l-1.8,4H3.3L12.1,0H2C.9,0,0,.9,0,2v20c0,1.1.9,2,2,2h21.1Z'/%3e%3cpath%20class='st2'%20d='M34,0h-16.8l10.6,24h6.2c1.1,0,2-.9,2-2V2C36,.9,35.1,0,34,0ZM32.5,20h-4V4h4v16Z'/%3e%3c/svg%3e)
Recapture
簡介 :
ReCapture是一種從單一用戶提供的視頻生成新視頻和新穎攝像機軌跡的方法。該技術允許我們從完全不同的角度重新生成源視頻，並帶有電影級別的攝像機運動。ReCapture通過使用多視圖擴散模型或基於深度的點雲渲染生成帶有新攝像機軌跡的嘈雜錨視頻，然後通過我們提出的掩蔽視頻微調技術將錨視頻重新生成為乾淨且時間上一致的重新角度視頻。這種技術的重要性在於它能夠利用視頻模型的強大先驗，將近似的視頻重新生成為時間上一致且美觀的視頻。
需求人群 :
目標受眾為視頻製作者、電影製作人、遊戲開發者等需要從單一視頻源生成新視角和攝像機運動的專業人士。ReCapture提供了一種創新的方法，使他們能夠在不實際拍攝新鏡頭的情況下，創造出具有新視角和動態攝像機效果的視頻內容，這對於節省成本和提高創作靈活性具有重要意義。
使用場景
電影製作人使用ReCapture為電影場景創建不同的攝像機角度和運動軌跡。
遊戲開發者利用ReCapture技術從遊戲錄像中生成新的宣傳視頻。
視頻編輯者使用ReCapture為社交媒體內容創造獨特的視角和動態效果。
產品特色
- 多視圖擴散模型或深度點雲渲染：生成帶有新攝像機軌跡的嘈雜錨視頻。
- 掩蔽視頻微調技術：通過微調學習場景動態和外觀，提高視頻質量。
- 場景動態學習：使用時間LoRA在掩蔽的錨視頻上進行微調，學習場景動態。
- 場景外觀學習：使用空間LoRA在源視頻的增強幀上進行微調，學習場景外觀。
- 忽略不信息區域：只學習錨視頻中信息豐富的部分，忽略缺失區域。
- 增強視頻模型的先驗：利用視頻模型的強大先驗，改善視頻質量。
- 支持複雜攝像機軌跡：包括繞場景中某點的軌道運動等。
使用教程
1. 提供一個用戶視頻作為源視頻。
%20--%3e%3cdefs%3e%3cstyle%3e%20.st0%20{%20fill:%20%230080ff;%20}%20%3c/style%3e%3c/defs%3e%3cpath%20class='st0'%20d='M16.2,11.1c.4.5.4,1.2,0,1.8l-4.7,7.1h-3.8l5.3-8L7.6,4h3.8l4.7,7.1Z'/%3e%3c/svg%3e)
2. 確定新的攝像機軌跡，包括變焦、平移和傾斜等。
3. 使用多視圖擴散模型或深度點雲渲染生成帶有新攝像機軌跡的錨視頻。
4. 應用掩蔽視頻微調技術，對錨視頻進行微調，以學習場景動態和外觀。
5. 通過微調後的模型，重新生成乾淨且時間上一致的重新角度視頻。
6. 檢查最終視頻的質量，並根據需要進行進一步的調整。
7. 導出並使用生成的視頻內容。
精選AI產品推薦
國外精選
Pika
Pika是一個視頻製作平臺,用戶可以上傳自己的創意想法,Pika會自動生成相關的視頻。主要功能有:支持多種創意想法轉視頻,視頻效果專業,操作簡單易用。平臺採用免費試用模式,定位面向創意者和視頻愛好者。
視頻生成
18.7M
Haiper
Haiper AI 是構建下一代內容創作的最佳感知基礎模型的使命。它提供以下主要功能：文本轉視頻，圖片動畫，視頻重繪，導演視角。Haiper AI 可以將文字內容和靜態圖片無縫轉化為動態視頻，只需拖放圖像即可使其栩栩如生。使用 Haiper AI 的重繪工具，您可以輕鬆修改視頻的顏色、紋理和元素，以提升視覺內容的品質。通過高級控制工具，您可以像導演一樣調整鏡頭角度、燈光效果、角色姿勢和物體運動。Haiper AI 適用於各種場景，如內容創作、設計、營銷等。定價請參考官方網站。
視頻生成
10.5M