Meta 开源音频生成框架 AudioCraft:文字一键生成音乐和环境音效
Meta 正式开源音频生成框架 AudioCraft,并公开全部代码与权重。该框架打包了文本生成音乐的 MusicGen、生成环境音效的 AudioGen 以及升级版神经编解码器 EnCodec。研究者和创作者可以直接用自己的数据集训练专属模型。
Meta 正式开源音频生成框架 AudioCraft,并公开全部代码与权重。该框架打包了文本生成音乐的 MusicGen、生成环境音效的 AudioGen 以及升级版神经编解码器 EnCodec。研究者和创作者可以直接用自己的数据集训练专属模型。
Hugging Face 发布实验性项目 AI WebTV。该方案用 ChatGPT 构思提示词,串接 Zeroscope V2 生成视频短片,再经 FILM 插帧与 MusicGen 配乐,最后通过 FFmpeg 自动推流。虽然画质和连贯性有限,但跑通了开源多模态端到端自动播出的流水线。
Meta 推出音乐生成模型 MusicGen,支持通过文本描述或旋律提示来创作音乐。该模型基于 2 万小时的音乐和乐器样本训练,理论上只要哼个调子就能生成变体曲目。这意味着零门槛音乐创作正在成真,但也可能面临音乐产业的版权挑战。