%20--%3e%3cdefs%3e%3cstyle%3e%20.st0%20{%20fill:%20%23061b40;%20}%20.st1%20{%20fill:%20%23306af1;%20}%20.st2%20{%20fill:%20%235ce5cf;%20}%20%3c/style%3e%3c/defs%3e%3cg%3e%3cpath%20class='st0'%20d='M55,10.5h9v3h-9v9h12V7.5h-12v3ZM64,19.5h-6v-3h6v3Z'/%3e%3cpolygon%20class='st0'%20points='69%2016.5%2078%2016.5%2078%2019.5%2069%2019.5%2069%2022.5%2081%2022.5%2081%2013.5%2072%2013.5%2072%2010.5%2081%2010.5%2081%207.5%2069%207.5%2069%2016.5'/%3e%3cpolygon%20class='st0'%20points='95%2010.5%2095%207.5%2083%207.5%2083%2022.5%2095%2022.5%2095%2019.5%2086%2019.5%2086%2016.5%2095%2016.5%2095%2013.5%2086%2013.5%2086%2010.5%2095%2010.5'/%3e%3cpath%20class='st0'%20d='M40,1.5v21h11.6l1.4-1.4v-7.6h0c0,0-1.4-1.5-1.4-1.5l1.4-1.4V2.9l-1.4-1.4h-11.6ZM50,19.5h-7v-6h7v6ZM50,10.5h-7v-6h7v6Z'/%3e%3c/g%3e%3cpath%20class='st1'%20d='M23.1,24L14.7,4.8l-4.9,11.2h3.8l-1.8,4H3.3L12.1,0H2C.9,0,0,.9,0,2v20c0,1.1.9,2,2,2h21.1Z'/%3e%3cpath%20class='st2'%20d='M34,0h-16.8l10.6,24h6.2c1.1,0,2-.9,2-2V2C36,.9,35.1,0,34,0ZM32.5,20h-4V4h4v16Z'/%3e%3c/svg%3e)
Hunyuanvideo
簡介 :
HunyuanVideo是騰訊開源的一個系統性框架，用於訓練大型視頻生成模型。該框架通過採用數據策劃、圖像-視頻聯合模型訓練和高效的基礎設施等關鍵技術，成功訓練了一個超過130億參數的視頻生成模型，是所有開源模型中最大的。HunyuanVideo在視覺質量、運動多樣性、文本-視頻對齊和生成穩定性方面表現出色，超越了包括Runway Gen-3、Luma 1.6在內的多個行業領先模型。通過開源代碼和模型權重，HunyuanVideo旨在縮小閉源和開源視頻生成模型之間的差距，推動視頻生成生態系統的活躍發展。
需求人群 :
目標受眾為視頻生成領域的研究人員、開發者和內容創作者。HunyuanVideo的高性能和靈活性使其成為探索視頻生成技術的理想選擇，尤其適合需要生成高質量、多樣化視頻內容的場景。
使用場景
視頻內容創作者使用HunyuanVideo生成具有特定風格和主題的短視頻。
研究人員利用HunyuanVideo進行視頻生成模型的性能對比研究。
教育機構使用HunyuanVideo作為教學工具，向學生展示視頻生成技術的實際應用。
產品特色
統一的圖像和視頻生成架構：引入Transformer設計，使用全注意力機制進行圖像和視頻生成。
MLLM文本編碼器：使用預訓練的多模態大型語言模型作為文本編碼器，提高圖像-文本對齊和複雜推理能力。
3D VAE壓縮：通過Causal 3D VAE壓縮像素級視頻和圖像到緊湊的潛在空間，減少後續擴散變換模型的令牌數量。
提示重寫模型：針對用戶提供的提示的變異性，微調Hunyuan-Large模型以適應模型偏好的提示。
高效的視頻生成：支持多種分辨率和幀率的視頻生成，滿足不同場景的需求。
開源代碼和模型權重：便於社區成員進行實驗和創新。
使用教程
1. 克隆HunyuanVideo倉庫到本地。
%20--%3e%3cdefs%3e%3cstyle%3e%20.st0%20{%20fill:%20%230080ff;%20}%20%3c/style%3e%3c/defs%3e%3cpath%20class='st0'%20d='M16.2,11.1c.4.5.4,1.2,0,1.8l-4.7,7.1h-3.8l5.3-8L7.6,4h3.8l4.7,7.1Z'/%3e%3c/svg%3e)
2. 根據提供的`environment.yml`文件設置Conda環境，並激活環境。
3. 安裝所需的pip依賴項。
4. 安裝flash attention v2以加速模型運行。
5. 下載預訓練模型。
6. 使用命令行工具`sample_video.py`進行視頻生成，指定視頻大小、長度、採樣步數和文本提示等參數。
7. 運行命令並等待視頻生成完成，檢查指定的保存路徑獲取結果。
精選AI產品推薦
國外精選
Pika
Pika是一個視頻製作平臺,用戶可以上傳自己的創意想法,Pika會自動生成相關的視頻。主要功能有:支持多種創意想法轉視頻,視頻效果專業,操作簡單易用。平臺採用免費試用模式,定位面向創意者和視頻愛好者。
視頻生成
18.7M
Haiper
Haiper AI 是構建下一代內容創作的最佳感知基礎模型的使命。它提供以下主要功能：文本轉視頻，圖片動畫，視頻重繪，導演視角。Haiper AI 可以將文字內容和靜態圖片無縫轉化為動態視頻，只需拖放圖像即可使其栩栩如生。使用 Haiper AI 的重繪工具，您可以輕鬆修改視頻的顏色、紋理和元素，以提升視覺內容的品質。通過高級控制工具，您可以像導演一樣調整鏡頭角度、燈光效果、角色姿勢和物體運動。Haiper AI 適用於各種場景，如內容創作、設計、營銷等。定價請參考官方網站。
視頻生成
10.5M