跳到正文
IFAI

AI工具

ElevenLabs 推出多語言模型 v1:支援德法西等 7 種語言,跨語種保留原聲

首次發布 傳播指數 41

ElevenLabs 推出全新語音合成模型 Eleven Multilingual v1,新增法、德、印地、意、波蘭、葡萄牙和西語 7 種語言支援。該模型能在切換語言時保留說話人獨特的音色與原口音,併兼容聲音克隆。不過非英語輸入下的數字與縮寫有時仍會預設按英文發音。

圖:beta.elevenlabs.io

過去做多語言配音,最讓人頭疼的不是找不到翻譯,而是原配音演員那股獨有的嗓音特質和情緒,換了個語種就蕩然無存。

ElevenLabs 在其 Beta 平臺上線了全新語音合成模型 Eleven Multilingual v1。新模型一口氣加入了七種新語言支援,包括法語、德語、印地語、義大利語、波蘭語、葡萄牙語和西班牙語。所有訂閱檔位的使用者,現在都能在控制面板的下拉選單裡直接切到這個新模型。

換了語種,聲音還是那個味道

新模型完全基於 ElevenLabs 內部研發。它繼承了上一代單語言模型 Eleven Monolingual v1 的核心能力,比如能根據上下文理解文本細微差別,並輸出帶有豐富情緒的語氣表現。

最大的亮點在於它和 VoiceLab 的聯動。無論是即時聲音克隆還是聲音設計生成的音色,在跨語言合成時都能保留原始的發音習慣和特色,甚至包括原本的口音。

模型還具備識別混合文本的能力,你可以在同一個提示詞裡夾雜不同語種,AI 會盡量按對應的語言發音。不過官方也坦承,想要最好的效果,目前還是建議單次只輸入單一語言的文本。

當然,早期版本難免有瑕疵。ElevenLabs 指出,數字、首字母縮寫以及外來詞有時會預設讀成英語。比如在西班牙語文本里輸入數字 11 或者單詞 radio,AI 可能會用英文腔讀出來。官方給出的權宜之計是:把數字和縮寫在目標語言裡完整拼寫成文字。

為什麼重要

對獨立創作者和獨立遊戲開發者來說,這套工具非常實用。以往做海外本地化,找多國母語配音演員的成本幾乎是不可承受的,而常規的機械 TTS 又毫無代入感。現在一個人就能用同一套標誌性音色,低成本把內容鋪到歐洲和南美等主流語種市場。只要你注意把數字和縮寫手動拼寫出來,它現在就值得放進工作流裡跑測試。

對語音合成行業來說,這是一次關鍵的競爭分流。傳統 TTS 還在死磕單語種的發音標準度,而 ElevenLabs 把發力點放在了音色跨語種的一致性和情緒感染力上。這種做法直接把 AI 語音從機械播報拉進了影視和遊戲敘事的門檻。

我們認為,ElevenLabs 聰明的地方在於沒有把多語言功能做成昂貴的企業專享,而是全量開放給所有訂閱使用者,這會極快地幫他們積累真實的跨語言反饋。但隱患也很明顯,混雜語言發音錯亂、數字跳回英文這些問題,說明底層文本理解和音素對映還不夠穩固。如果後續面對語系更復雜的語種,這種跨語言一致性是否還能撐得住,依然有待觀察。

來源 (1)

  1. [1]
    beta.elevenlabs.io(在新分頁開啟)原文beta.elevenlabs.io

每日 AI 內容精選