YuE
Y
Yue
簡介 :
YuE 是由香港科技大學和多模態藝術投影團隊開發的開源音樂生成模型。它能夠根據給定的歌詞生成長達 5 分鐘的完整歌曲,包括人聲和伴奏部分。該模型通過多種技術創新,如語義增強音頻標記器、雙標記技術和歌詞鏈式思考等,解決了歌詞到歌曲生成的複雜問題。YuE 的主要優點是能夠生成高質量的音樂作品,並且支持多種語言和音樂風格,具有很強的可擴展性和可控性。該模型目前免費開源,旨在推動音樂生成技術的發展。
需求人群 :
YuE 適合音樂創作者、音樂製作人、音頻工程師以及對音樂生成技術感興趣的科研人員。它可以幫助創作者快速生成音樂作品的初稿,激發創作靈感,也可以用於音樂教育和娛樂領域,為用戶提供全新的音樂體驗。
總訪問量: 51.7K
佔比最多地區: US(22.10%)
本站瀏覽量 : 81.7K
使用場景
生成一首流行風格的中文歌曲《我的愛》,歌詞由 GPT 生成,旋律和伴奏由 YuE 生成。
生成一首金屬風格的英文歌曲《Step Back》,展示了 YuE 在重金屬風格下的表現能力。
生成一首爵士風格的英文歌曲《Quiet Evening》,展現了 YuE 在爵士風格下的細膩表現。
產品特色
支持多種語言的歌詞到歌曲生成,包括英語、中文、日語和韓語。
能夠生成多種音樂風格,如流行、搖滾、爵士、說唱等。
採用語義增強音頻標記器,降低訓練成本並加速收斂。
通過雙標記技術實現人聲與伴奏的同步建模。
使用歌詞鏈式思考技術,逐步生成整首歌曲。
提供多種模型檢查點和上採樣器,方便用戶使用和擴展。
支持多語言代碼切換,生成跨語言的音樂作品。
能夠學習和生成複雜的聲樂技巧,如死亡咆哮、混聲等。
使用教程
1. 訪問 YuE 的 GitHub 頁面,下載所需的模型檢查點。
2. 準備歌詞文本,根據需要選擇語言和音樂風格。
3. 使用 YuE 提供的工具將歌詞分割成多個片段。
4. 將歌詞片段輸入到 YuE 模型中,生成對應的音樂片段。
5. 將生成的音樂片段拼接成完整的歌曲。
6. 使用上採樣器對生成的音樂進行進一步優化(可選)。
7. 調整生成的音樂參數,如節奏、音調等,以滿足個人需求。
8. 導出最終生成的音樂文件,用於分享或進一步創作。
AIbase
智啟未來,您的人工智能解決方案智庫
© 2025AIbase