YouTube 引入 AI 配音:自動轉寫翻譯加合成,已開啟內測
週四,YouTube 在 VidCon 宣佈引入 Google 孵化器旗下的 AI 配音團隊 Aloud。該工具能先轉寫影片文稿供人工校對,再自動翻譯併合成配音;目前正與數百位創作者測試英語、西語及葡語,後續還計劃加入創作者聲紋克隆與口型同步。

想要做多語言出海的影片創作者,最頭疼的往往是高昂的翻譯和配音成本。週四在 VidCon 大會上,YouTube 宣佈將 Google 內部孵化器 Area 120 的 AI 配音團隊 Aloud 招入麾下,把多語言配音功能直接整合進平臺。
自動出音軌,明年還要做口型同步
根據 Aloud 官網介紹,它的工作流程分為三步:先將影片語音自動轉錄成文字供創作者核對修改,接著完成翻譯,最後生成配音音軌。
YouTube 的 Amjad Hanif 對 The Verge 表示,平臺目前正與數百名創作者測試這項工具。發言人 Jessica Gibby 透露,目前 Aloud 僅支援英語、西班牙語和葡萄牙語,未來還會增加更多語種。
如果想聽實際效果,Amoeba Sisters 頻道的影片已經掛上了西班牙語測試音軌。此外 YouTube 還在研發更高階的功能,計劃在 2024 年讓配音聽起來貼近創作者本人的原聲,並加入更細膩的情緒表達以及口型同步。
為什麼重要
對創作者來說,過去組建外語配音團隊成本極高,現在平臺直接提供免費甚至低門檻的 AI 替代方案,哪怕目前只覆蓋西語和葡語,也足以讓個人創作者試水拉美和歐美市場。
我們認為 YouTube 直接把自家的孵化專案收編進主產品,是一步非常實用的棋,能進一步加深創作者對平臺的粘性。不過現階段的機械配音依然缺乏感染力,這套工具究竟是雞肋還是神器,看起來完全取決於 2024 年的聲音克隆和口型匹配能否真正落地。
來源 (1)
- theverge.com(在新分頁開啟)原文theverge.com