跳到正文
IFAI

AI工具

YouTube 引入 AI 配音:自动转写翻译加合成,已开启内测

首次发布 传播指数 37

周四,YouTube 在 VidCon 宣布引入 Google 孵化器旗下的 AI 配音团队 Aloud。该工具能先转写视频文稿供人工校对,再自动翻译并合成配音;目前正与数百位创作者测试英语、西语及葡语,后续还计划加入创作者声纹克隆与口型同步。

YouTube 引入 AI 配音:自动转写翻译加合成,已开启内测
图:theverge.com

想要做多语言出海的视频创作者,最头疼的往往是高昂的翻译和配音成本。周四在 VidCon 大会上,YouTube 宣布将 Google 内部孵化器 Area 120 的 AI 配音团队 Aloud 招入麾下,把多语言配音功能直接集成进平台。

自动出音轨,明年还要做口型同步

根据 Aloud 官网介绍,它的工作流程分为三步:先将视频语音自动转录成文字供创作者核对修改,接着完成翻译,最后生成配音音轨。

YouTube 的 Amjad Hanif 对 The Verge 表示,平台目前正与数百名创作者测试这项工具。发言人 Jessica Gibby 透露,目前 Aloud 仅支持英语、西班牙语和葡萄牙语,未来还会增加更多语种。

如果想听实际效果,Amoeba Sisters 频道的视频已经挂上了西班牙语测试音轨。此外 YouTube 还在研发更高级的功能,计划在 2024 年让配音听起来贴近创作者本人的原声,并加入更细腻的情绪表达以及口型同步。

为什么重要

对创作者来说,过去组建外语配音团队成本极高,现在平台直接提供免费甚至低门槛的 AI 替代方案,哪怕目前只覆盖西语和葡语,也足以让个人创作者试水拉美和欧美市场。

我们认为 YouTube 直接把自家的孵化项目收编进主产品,是一步非常实用的棋,能进一步加深创作者对平台的粘性。不过现阶段的机械配音依然缺乏感染力,这套工具究竟是鸡肋还是神器,看起来完全取决于 2024 年的声音克隆和口型匹配能否真正落地。

来源 (1)

  1. [1]
    theverge.com(在新标签页打开)原文theverge.com

每日 AI 内容精选