跳到正文
IFAI

AI工具

ElevenLabs 推出多语言模型 v1:支持德法西等 7 种语言,跨语种保留原声

首次发布 传播指数 41

ElevenLabs 推出全新语音合成模型 Eleven Multilingual v1,新增法、德、印地、意、波兰、葡萄牙和西语 7 种语言支持。该模型能在切换语言时保留说话人独特的音色与原口音,并兼容声音克隆。不过非英语输入下的数字与缩写有时仍会默认按英文发音。

图:beta.elevenlabs.io

过去做多语言配音,最让人头疼的不是找不到翻译,而是原配音演员那股独有的嗓音特质和情绪,换了个语种就荡然无存。

ElevenLabs 在其 Beta 平台上线了全新语音合成模型 Eleven Multilingual v1。新模型一口气加入了七种新语言支持,包括法语、德语、印地语、意大利语、波兰语、葡萄牙语和西班牙语。所有订阅档位的用户,现在都能在控制面板的下拉菜单里直接切到这个新模型。

换了语种,声音还是那个味道

新模型完全基于 ElevenLabs 内部研发。它继承了上一代单语言模型 Eleven Monolingual v1 的核心能力,比如能根据上下文理解文本细微差别,并输出带有丰富情绪的语气表现。

最大的亮点在于它和 VoiceLab 的联动。无论是即时声音克隆还是声音设计生成的音色,在跨语言合成时都能保留原始的发音习惯和特色,甚至包括原本的口音。

模型还具备识别混合文本的能力,你可以在同一个提示词里夹杂不同语种,AI 会尽量按对应的语言发音。不过官方也坦承,想要最好的效果,目前还是建议单次只输入单一语言的文本。

当然,早期版本难免有瑕疵。ElevenLabs 指出,数字、首字母缩写以及外来词有时会默认读成英语。比如在西班牙语文本里输入数字 11 或者单词 radio,AI 可能会用英文腔读出来。官方给出的权宜之计是:把数字和缩写在目标语言里完整拼写成文字。

为什么重要

对独立创作者和独立游戏开发者来说,这套工具非常实用。以往做海外本地化,找多国母语配音演员的成本几乎是不可承受的,而常规的机械 TTS 又毫无代入感。现在一个人就能用同一套标志性音色,低成本把内容铺到欧洲和南美等主流语种市场。只要你注意把数字和缩写手动拼写出来,它现在就值得放进工作流里跑测试。

对语音合成行业来说,这是一次关键的竞争分流。传统 TTS 还在死磕单语种的发音标准度,而 ElevenLabs 把发力点放在了音色跨语种的一致性和情绪感染力上。这种做法直接把 AI 语音从机械播报拉进了影视和游戏叙事的门槛。

我们认为,ElevenLabs 聪明的地方在于没有把多语言功能做成昂贵的企业专享,而是全量开放给所有订阅用户,这会极快地帮他们积累真实的跨语言反馈。但隐患也很明显,混杂语言发音错乱、数字跳回英文这些问题,说明底层文本理解和音素映射还不够稳固。如果后续面对语系更复杂的语种,这种跨语言一致性是否还能撑得住,依然有待观察。

来源 (1)

  1. [1]
    beta.elevenlabs.io(在新标签页打开)原文beta.elevenlabs.io

每日 AI 内容精选