動画の法線や照明を同時生成する「UniVid-X」登場 背景差し替えや再ライティングも可能に
動画拡散モデルを活用したマルチモーダルフレームワーク「UniVid-X」が発表された。通常のカラー映像だけでなく、物体の地色や光の照射情報、表面法線、アルファチャンネルを同時に推定・生成できる。これにより、単一の動画から夕暮れの光を再現したり、前景・背景を高精度に差し替えたりする編集が可能になる。
動画拡散モデルを活用したマルチモーダルフレームワーク「UniVid-X」が発表された。通常のカラー映像だけでなく、物体の地色や光の照射情報、表面法線、アルファチャンネルを同時に推定・生成できる。これにより、単一の動画から夕暮れの光を再現したり、前景・背景を高精度に差し替えたりする編集が可能になる。