本文へスキップ
IFAI

AIツール

VimeoがAI動画翻訳を提供開始、話者の声のまま29言語に吹き替え可能に

公開 拡散指数 34

Vimeoは生成AIを活用した動画翻訳ソリューションを発表した。話者の声色やトーンを維持したまま、動画の音声と字幕を29言語に翻訳できる。50以上の言語入力に対応し、視聴者はプレーヤー内で多言語音声を直接切り替え可能。企業の研修やマーケティングにおける多言語展開のコストを大幅に引き下げる。

VimeoがAI動画翻訳を提供開始、話者の声のまま29言語に吹き替え可能に
画像:finance.yahoo.com

企業の研修動画やトップメッセージを海外拠点向けに展開する作業は、これまで膨大なコストと手間がかかる業務でした。外部の翻訳会社やプロの声優を手配するか、あるいは機械的な字幕を付けて済ませるのが一般的でした。

動画配信プラットフォームのVimeoは7月31日、生成AIを活用した動画翻訳ソリューションを発表しました。動画内の音声と字幕を複数言語に翻訳するだけでなく、話者本人の声質や細かなニュアンスをそのまま再現する音声クローン機能を備えています。

視聴者は、まるで本人が流暢な外国語でスピーチしているかのような自然なトーンで動画を視聴できます。

話者の声を保ったまま29言語へ自動翻訳

今回の翻訳機能は、Vimeoのプラットフォーム上にネイティブに統合されています。

ユーザーは50以上の言語で作成された動画をVimeoにアップロードし、動画編集画面の「Vimeo AI」パネルから翻訳オプションを選択します。

翻訳先として選択できる言語は最大29言語です。AIが元の話者の声のトーンや抑揚を解析し、選択した言語へ翻訳された音声と字幕を自動で生成します。

処理が完了すると、翻訳された音声トラックと字幕は同じ動画ファイル内にそのまま保存されます。視聴者はプレーヤー上で希望の言語を自由に切り替えて再生可能です。

企業向けの一元管理とプレイヤー連携

VimeoのチーフプロダクトオフィサーであるAshraf Alkarmi氏は、単なるテキスト起こしを超え、生成AIで話者の本来のニュアンスやトーンを維持することで、言語を問わずシームレスな視聴体験を実現したと述べています。

Vimeoはこの機能を、人材育成や社内コミュニケーション、グローバルマーケティングの現場に向けてアピールしています。

たとえば、オンライン研修教材の多言語ローカライズを自動化したり、経営陣からの重要なアップデートを世界中の従業員へ本人の声で届けることが可能です。

また、製品デモ動画やウェビナーの録画を複数言語で展開する際も、言語ごとに別々の動画ファイルを書き出す必要がなく、1つの動画ライブラリで一元管理できます。

なぜ重要か

私たちは、Vimeoのこのアプローチは企業実務のペインポイントを非常に的確に突いていると考えます。

海外に拠点を持つ企業やグローバル展開を進めるチームにとって、すぐに試す価値のある機能です。従来の外注費やスタジオ収録にかかっていた数週間単位の納期を、わずか数分にまで短縮できる実用的なメリットがあります。

先行する単体のAI音声生成サービスと比較しても、Vimeoの強みは配信基盤との統合にあります。音声を別ツールでクローンして動画編集ソフトで合わせ直す手間がなく、既存のプレーヤー内で多言語トラックとして完結する運用性は、企業のコンテンツ管理者にとって極めて合理的です。

ただし、発表内容を見る限り、話者の口の動きを翻訳音声に合わせるリップシンク機能については触れられていません。そのため、口の動きと音声のズレによる違和感が残る点は注意が必要です。社内研修や全社ミーティングには十分ですが、厳密なクオリティが求められる対外プロモーション動画では、まだ確認と使い分けが求められそうです。

情報源 (1)

  1. [1]
    finance.yahoo.com(新しいタブで開きます)原文finance.yahoo.com

毎日のAIピックアップ