Spotify 联手 OpenAI:克隆播客主播声音,直接跨语种原声输出
Spotify 联合 OpenAI 测试全新的 AI 语音翻译功能,能用播客创作者自己的声音将其节目翻译成其他语言。首批先将部分英语播客转译为西班牙语,后续计划加入法语和德语。最值得关注的是,它不是机械配音,而是克隆原声合成。不过目前该功能仅限少数头部主播测试。

想象一下,你平时常听的英语播客主播,突然在一期节目里操着一口地道的西班牙语跟你聊天,而且连音色、语调甚至喘气节奏都一模一样。
Spotify 宣布联手 OpenAI,推出了一项名为「语音翻译」(Voice Translation)的新功能。说白了,它就是让 AI 克隆主播自己的声音,把播客节目直接翻录成其他语言版本。
让主播自己「学会」说外语
传统的跨国播客要么靠字幕,要么靠专业配音员重新配音。但这两种方式都有硬伤,看字幕丢了听播客随走随听的精髓,而换了配音员的声音,主播个人的人格魅力就大打折扣。
Spotify 这次的做法直接跳过了传统配音。它的技术底座是 OpenAI 的 Whisper 语音识别转录工具,但功能远不止语音转文字。系统把英文内容翻译成目标语言后,会利用主播的声音样本,合成出一份用主播原声朗读的外语播客。
按照 Spotify 的计划,第一批测试主要是把英文播客翻译成西班牙语,未来几周内还会陆续上线法语和德语版本。
首批参与测试的阵容非常豪华,包括 Dax Shepard、Monica Padman、Lex Fridman、Bill Simmons 以及 Steven Bartlett。接下来,The Ringer 旗下的《The Rewatchables》以及 Trevor Noah 即将推出的新节目也会加入进来。
藏在背后的克隆技术与克制测试
负责把文字变成逼真人声的,大概率也是 OpenAI。OpenAI 在同一天刚发布了一项声音克隆工具,号称只需要几秒钟的语音样本,就能生成极其逼真的人声。
不过,正因为这项技术模仿得太像,OpenAI 出于安全和隐私方面的顾虑,明确表示会严格限制该工具的开放范围。
这也解释了为什么 Spotify 目前表现得非常谨慎。Spotify 表示,这项翻译技术目前仅在「精选的播客群体」中进行内测,既没有给出更广泛的开放时间表,也没有说明普通创作者什么时候才能用上。
另外在上线节奏上也有微调。Spotify 最初曾表示法语单集会在当天同步上线,随后更新说明称法语版本推迟到了后续几周。
为什么重要
对创作者来说,语言从来都是内容出海最大的一道坎。以前做多语种本地化,雇佣翻译和配音团队的成本高昂,只有少数头部机构吃得消。如果这项技术未来普及,个人创作者几乎不需要额外付出录制时间,就能把自己的声音和内容直接推向拉美或欧洲市场。
对听众而言,播客本质上是一种极度依赖陪伴感和个人声线的媒介。Spotify 个性化副总裁 Ziad Sultan 就提到,保留创作者的原声能让全球听众以更真实的方式发现新主播。能听到喜欢的硬核科技主播用母语跟你对话,确实比生硬的译制腔亲切得多。
从行业竞争来看,我们认为 Spotify 这一步走得非常聪明。播客平台拼独家内容已经进入瓶颈期,而语音克隆翻译是一条全新的护城河。它既盘活了现有的头部英文内容资产,又直接打压了各语言区靠做「搬运」或「本地化翻版」的内容生态。
但隐患同样明显。首当其冲的就是伦理与版权风险。虽然现在是官方合作授权,但声音被克隆后,语意翻译是否会产生偏差、主播是否会为自己从未真正说过的话负责,目前都缺乏规范。再加上 OpenAI 对声纹滥用的忌惮,这项功能想从少数顶流播客走向全民可用,看起来还有很长的一段路要走。
来源 (1)
- theverge.com(在新标签页打开)原文theverge.com
话题追踪Spotify 的生成式 AI 扩张计划
- Spotify 联手 OpenAI:克隆播客主播声音,直接跨语种原声输出本条
- Spotify 计划加码 AI:不仅要做播客总结,还要帮广告主批量造音频广告
- Spotify 被曝研发 AI 口播广告:克隆主播声音,不用本人录音