NVIDIAが「Audio2Face」をOSS化：音声から3Dキャラの表情を自動生成
NVIDIAは、音声入力から高精度な3Dキャラクターの表情やリップシンクを自動生成する「Audio2Face」のモデル、SDK、学習フレームワークをオープンソース化した。オフラインレンダリングだけでなくリアルタイム動作にも対応し、ゲーム開発やAIアバター制作における表情アニメーションの敷居を大きく下げる。
NVIDIAは、音声入力から高精度な3Dキャラクターの表情やリップシンクを自動生成する「Audio2Face」のモデル、SDK、学習フレームワークをオープンソース化した。オフラインレンダリングだけでなくリアルタイム動作にも対応し、ゲーム開発やAIアバター制作における表情アニメーションの敷居を大きく下げる。