Meta 发布 Audiobox:输入文字就能做音效、改语音
Meta 发布音频生成模型 Audiobox。作为 Voicebox 的后继者,它不仅能用文本提示词直接生成语音、音效和环境音,还支持「语音+文本」双输入来自由调整语气与场景。目前该模型仅面向受选研究人员开放申请,并同步上线了交互 Demo。

想给一段雨声里加两声闷雷,或者让原本平淡的录音瞬间听起来像在空旷的大教堂里说话,过去得靠专业的混音师翻遍音效库,再一点点调混响。
Meta 刚刚拿出了 Voicebox 的继任者 Audiobox。它把人类语音、离散音效和完整的声音环境统一塞进了一个模型里,支持用户直接用自然语言描述来生成或编辑音频。
既能捏嗓子,也能造环境
Audiobox 最直观的改变是支持双输入交互。比如你可以直接输入一段文字描述,像「水流湍急的小河伴随鸟鸣」或者「年轻女性用高音调和快语速说话」,模型就会从零生成对应的环境音或人声。
更有意思的是声音重塑。用户可以丢给模型一段现成的人声录音作为音色锚点,再附带一句文本提示词,例如「在教堂里」或者「悲伤且缓慢地说话」。
据 Meta 介绍,这是业内首个支持通过声音提示加文本描述进行自由声音风格重塑的模型。在声音风格相似度测试中,Audiobox 比前代 Voicebox 提升了 30% 以上。
在生成质量和对文本描述的忠实度上,Meta 表示其主观评测结果显著超过了此前的 AudioLDM2、VoiceLDM 和 TANGO 等顶尖模型。
把做音频变成「填空题」
技术架构上,Audiobox 沿用了 Voicebox 的 Flow-matching 建模方法和引导生成训练目标,但泛化范围扩大到了非语言音效。
这也让它具备了音频修复与填充能力。说白了,你可以把它当成声音领域的修图软件:如果你觉得一段下雨的声音太单调,可以用提示词精准地在中间空隙插进几段不同质感的雷声。
不过,强大的声音克隆和拟真能力也带来了滥用隐患。Meta 并没有完全开源这个模型,而是通过定向审核的方式,仅向少数有语音研究背景的学者和学术机构开放纯研究许可,同时在官网上线了一个交互式体验 Demo。
为什么重要
我们认为,Audiobox 最大的意义在于打破了声音领域专业工程与大众创作之间的壁垒。
对于播客创作者、独立独立游戏开发者或视频制作者来说,传统拟音和寻找合适音效的成本极高。Audiobox 证明了自然语言完全可以作为声音调控的通用接口,未来的音效创作很可能会像今天用 Midjourney 生成配图一样自然。
Meta 的聪明之处在于统一了语音与音效两大模态。以前做人声克隆的模型不懂环境音,做环境音的模型不会调情绪,Audiobox 把音色、情绪、空间混响和背景噪音全部揉进一个模型里,让「声画同步」的上下文编辑变得真正可用。
隐患也显而易见。人声克隆和环境伪造的门槛被彻底打穿后,欺诈和冒充的风险急剧增加。Meta 选择仅向特定学者开放权重并上线受限 Demo,看起来是在技术展示与安全伦理之间做出的谨慎折中。但只要这项技术的技术路径被验证,开源社区的复现只是时间问题,行业对合成音频的水印与鉴伪需求将变得空前迫切。
来源 (1)
- ai.meta.com(在新标签页打开)原文ai.meta.com
话题追踪Meta Audiobox
- Meta 开放 Audiobox 试用:支持零样本语音合成与文本生成音效
- Meta 发布 Audiobox:输入文字就能做音效、改语音本条