CubeComposer：普通の単眼動画を360度パノラマに拡張、4Kにも対応

CubeComposer は、単一のカメラで撮影した通常の平面動画を 360 度全方位のパノラマ動画へと変換するオープンソースの動画モデルです。4K アップスケーリングにも対応しています。

カメラ背後の死角をどう補うか

CubeComposer は拡散モデルをベースに、球体空間を立方体の 6 つの面に分解して処理します。視点間の継ぎ目を自然に保つため、スパースアテンションのコンテキストプールを採用し、前後のフレームと隣接する面の両方を同時に参照しながら動画を生成します。

この仕組みによって、カメラ背後の映っていない風景をまるごと補完できます。生成された未撮影領域にはまだわずかな歪みが残るものの、画質や連続性は Argus などの競合モデルをはっきりと上回っています。プロジェクトの詳細は公式サイト（lg-li.github.io/project/cubec）で確認できます。

なぜ重要か

VR や空間映像を手がけるクリエイターにとって、専用の 360 度カメラを使わずに既存のストック動画をパノラマ素材化できる実用的な選択肢になります。競合の Argus より品質は良好ですが、補完部分の歪みは残るため、現時点では背景の穴埋めやプロトタイプ用途で試してみるのが向いています。