Tavusが対話モデル「Griffin」公開、通話テストで48%が「人間」と誤認
AIスタートアップのTavusはリアルタイムに対話できるビデオモデル「Griffin」を発表した。音声と映像を同時に知覚・生成するフルデュプレックス構造で、相槌や割り込みにも自然に対応し、通話実験では48%が本物の人間と誤認した。現在「Griffin-Lite」が限定テスター向けに公開されている。
AIスタートアップのTavusはリアルタイムに対話できるビデオモデル「Griffin」を発表した。音声と映像を同時に知覚・生成するフルデュプレックス構造で、相槌や割り込みにも自然に対応し、通話実験では48%が本物の人間と誤認した。現在「Griffin-Lite」が限定テスター向けに公開されている。
Tavusはリアルタイムアバター描画モデル「Phoenix-4.5」を発表しました。顔部分の合成をやめ、頭部から上半身全体を1フレームで一括生成するGANアーキテクチャを採用し、音声から映像までの遅延を134msに短縮しています。
TavusはAIビデオコンパニオンをノーコードで作成できる「PAL Maker」を発表した。ユーザーはAIクリエイター「Charlie」に対話で希望を伝えるだけで、視覚・記憶・感情理解を備えたアバターを生成可能。Raven-1などの独自モデルで動作し、医療や採用現場での導入が進んでいる。
Tavusは会話相手の感情や意図をリアルタイムに解釈するマルチモーダルAI「Raven-1」を発表した。音声と映像を統合し、単なる感情ラベルではなく自然言語で状態を出力する。更新遅延は300ミリ秒以内でOpenAI互換のツール呼び出しにも対応。文字起こしに依存していた対話AIが、皮肉や躊躇といった文脈を汲み取れるようになる。
Tavusは感情制御に対応したリアルタイム人物描画モデル「Phoenix-4」を発表した。事前録画のループ映像に頼る従来手法と異なり、ミリ秒単位の低遅延で頭部全体の動きや傾聴リアクション、会話文脈に沿った感情変化を動的に生成できる。
Tavus は fal 上で新たなリップシンクモデル「Hummingbird-0」のリサーチプレビューを公開した。同社によると、オープンおよびクローズドソースを問わず、検証した中で最も精度の高いゼロショット口唇同期モデルだという。
Tavusは対話型動画向けの新AIモデル「Phoenix-3」「Raven-0」「Sparrow-0」を発表し、APIを公開した。微表情の再現、リアルタイムの視覚認識、会話ターンの正確な制御を組み合わせ、より自然で滑らかなアバター対話を実現する。
Tavusは開発者向けに「Conversational Video Interface」を発表しました。見て・聞いて・話せるデジタルツインを構築でき、エンドツーエンドの遅延は1秒未満に抑えられています。ホワイトラベル対応でLLMやTTSも自由に差し替え可能です。