Meta 開源音訊生成框架 AudioCraft:文字一鍵生成音樂和環境音效
Meta 正式開源音訊生成框架 AudioCraft,並公開全部程式碼與權重。該框架打包了文本生成音樂的 MusicGen、生成環境音效的 AudioGen 以及升級版神經編解碼器 EnCodec。研究者和創作者可以直接用自己的資料集訓練專屬模型。
Meta 正式開源音訊生成框架 AudioCraft,並公開全部程式碼與權重。該框架打包了文本生成音樂的 MusicGen、生成環境音效的 AudioGen 以及升級版神經編解碼器 EnCodec。研究者和創作者可以直接用自己的資料集訓練專屬模型。
Hugging Face 釋出實驗性專案 AI WebTV。該方案用 ChatGPT 構思提示詞,串接 Zeroscope V2 生成影片短片,再經 FILM 插幀與 MusicGen 配樂,最後通過 FFmpeg 自動推流。雖然畫質和連貫性有限,但跑通了開源多模態端到端自動播出的流水線。
Meta 推出音樂生成模型 MusicGen,支援通過文本描述或旋律提示來創作音樂。該模型基於 2 萬小時的音樂和樂器樣本訓練,理論上只要哼個調子就能生成變體曲目。這意味著零門檻音樂創作正在成真,但也可能面臨音樂產業的版權挑戰。