本文へスキップ
IFAI

AIツール

Timekettle、通訳イヤホン向け「Babel OS」発表:音声複製や文脈予測に対応

公開 拡散指数 59

Timekettle は翻訳イヤホン向けの独自 OS「Babel OS」を発表した。AI による意味分割と文脈予測で超低遅延な同時通訳を実現し、話者の声色を再現する音声複製やカスタム辞書機能を備える。W4 Pro など既存端末向けに OTA 配信が始まっており、オフライン動作機能も開発中。

Timekettle、通訳イヤホン向け「Babel OS」発表:音声複製や文脈予測に対応
画像:aws.amazon.com

リアルタイム翻訳イヤホンを使ったことがある人なら、あの独特の気まずさを覚えているはずです。相手の話が終わった後、数秒間の不自然な沈黙が流れ、その後に抑揚のない機械的な合成音声が流れてくるという体験です。

翻訳デバイスを手がける Timekettle(タイムケトル)は、その壁をソフトウェアで崩しにかかりました。同社は AI 同時通訳向けに独自開発したオペレーティングシステム「Babel OS」を発表しました。

Babel OS は無料の OTA アップデートを通じて即座に提供が始まります。対応機種は幅広く、イヤホン型の W4 Pro、WT2 Edge、W3 に加え、据え置き型の X1 Interpreter Hub、携帯型の T1 および T1 Mini など、同社の主要ラインナップを網羅しています。

相手の発言を先読みし、本人の声色で返す

同時通訳で最大の課題となるのが遅延です。Babel OS は独自の通信・処理技術 HybridComm をベースにした AI セマンティックセグメンテーションを採用しています。

文章が完全に言い終わるのを待つのではなく、アルゴリズムと大規模言語モデルを用いて文脈から結末をリアルタイムに予測し、音声を適切に分割して並行処理します。これにより、ほぼゼロに近い低遅延で 40 以上の言語を双方向に変換できるとしています。

さらに注目されるのが音声クローニング機能の統合です。無機質なロボットボイスではなく、話者本人の声のトーンや話し方の癖、感情を反映した音声で翻訳を出力します。

専門用語や固有名詞、流行のスラングに対応するため、ユーザーが独自の辞書を登録できるカスタム用語集機能も備えました。米メディア The Verge の記者も、言語の急激な変化に対応できる点に高い関心を示しています。また、同社はネット接続のない航空機内や山間部でも機能するオンデバイスの AI Edge ソリューションも開発中としています。

なぜ重要か

専用の翻訳デバイスにとって、今回のソフトウェア刷新は極めて合理的かつ必要な一歩だと考えられます。

現在、大手スマートフォンメーカーが OS 標準機能としてリアルタイム翻訳を組み込み、汎用ワイヤレスイヤホンでも通訳ができる時代になっています。ハードウェアの売り切りモデルのままでは、いずれ汎用スマホの利便性に押し流されかねません。

既存の複数世代の製品に対して、無料で大幅な性能向上をもたらす OS アップデートを提供した点は、既存ユーザーへの配慮としても優れています。

ただし、文末を予測して先回り翻訳する仕組みは、発言が途中で脱線したり、強い方言が混ざったりした場合に誤訳を生むリスクと背中合わせです。日常会話の複雑さに予測アルゴリズムがどこまで耐えられるかは、実際の利用環境で見極める必要があります。

それでも、単語を正確に置き換える段階から、話者の個性や会話のテンポを再現する段階へ進んだ意義は大きいです。海外出張や多言語カンファレンスで同社デバイスを使っているなら、試す価値は十分にあります。

情報源 (3)

  1. [1]
    venturebeat.com(新しいタブで開きます)原文venturebeat.com
  2. [2]
  3. [3]

毎日のAIピックアップ