VRの頭部と手の動きでリアルタイム生成:一人称視点の対話型動画モデルが登場
VRヘッドセットで追跡した頭部や手の関節の動きに応じて一人称動画をリアルタイム生成する世界モデルが発表された。テキスト指示と実際の身振りを組み合わせて生成空間と対話でき、約11FPSで動作する。生成XRの新たな可能性を示す一方、解像度や滑らかさは発展途上だ。
VRヘッドセットで追跡した頭部や手の関節の動きに応じて一人称動画をリアルタイム生成する世界モデルが発表された。テキスト指示と実際の身振りを組み合わせて生成空間と対話でき、約11FPSで動作する。生成XRの新たな可能性を示す一方、解像度や滑らかさは発展途上だ。