間取り図から一軒家のVR内見ツアーを丸ごと生成、世界モデル「PanoWorld」発表

画像生成 AI を使って部屋の内装をデザインしたことがある人なら、誰もが同じ壁にぶつかったはずです。リビングの画像がどれほど美しくても、隣の寝室や廊下を出力させると、壁の位置が変わり、ドアが消え、家具の素材まで完全に別物になってしまいます。

従来の 2D 生成モデルは単発の絵を作るのは得意ですが、視点を変えるたびに記憶喪失を起こします。一方で、家全体を単一の 3D メッシュとして直接生成しようとすると、計算コストが膨大になり、細部のテクスチャがつぶれてしまいます。

研究チームはこうした課題を解決する空間世界モデル「PanoWorld」を発表しました。入力するのは 2D の間取り図 1 枚とスタイルの参考画像だけ。それだけで、家具が配置された家全体の 360 度パノラマ内見ツアーを一括生成できます。

AI に「空間メモリ」を持たせる賢い仕掛け

PanoWorld が巧みなのは、連続した広大な 3D 空間を無理に力技でレンダリングするのではなく、実際の不動産 VR 内見のように、部屋ごとの 360 度パノラマ地点をノードとしてつなぎ合わせ、自己回帰的に生成していく点です。

視点が変わっても部屋の構造や家具が破綻しないよう、モデルは 2 つの仕組みを連携させています。まず間取り図から家全体の「3D シェル」を抽出して大枠の幾何学的ガイドとし、さらに動的な 3D Gaussian Splatting（3DGS）キャッシュを保持して、レンダリング可能な空間メモリとして機能させます。

新しい視点のパノラマが生成されると、専用のパノラマ LRM がその情報を局所的な 3DGS 更新データに変換してメモリに蓄積します。同時に「部屋認識グループアテンション」によって、隣の部屋の特徴が別の部屋の内装に混ざり込むのを防ぎます。

この構造のおかげで、同じ間取りを維持したまま、フレンチラグジュアリー風からモダンミニマリズム風へとスタイルだけを一瞬で切り替えることも可能です。

論文は公開、コード配布は準備中

研究チームはすでに arXiv で論文を公開しており、プロジェクトページ上では異なる間取りやスタイルを切り替えるデモが確認できます。

ただし、今すぐ自分の手元で動かせるわけではありません。モデルの重みとソースコードはまだ公開されておらず、ページ上には「近日公開」と記載されています。

なぜ重要か

建築家やインテリアデザイナー、不動産事業者にとって、PanoWorld はプレゼンの常識を変える可能性を秘めています。従来なら数日かけて 3D モデリングとレンダリングを行っていた複数パターンの内装提案が、間取り図から数分でインタラクティブな VR 内見データとして仕上がるようになるためです。

技術的な観点からも、世界モデルの実装アプローチとして非常に現実的です。高コストな完全連続 3D 空間を追うのではなく、2D 拡散モデルの高い描写力と 3DGS の空間メモリを分離して組み合わせることで、多部屋規模での一貫性という難問をスマートに解決しています。

もっとも、自由に歩き回れる完全なフリー移動ではなく、地点間をワープする離散ナビゲーションにとどまる点は制約と言えます。それでも、生成 AI に確かな空間構造と記憶を持たせるこの設計手法は、今後の空間コンピューティングや建築デザインツールの標準的な道筋を示していると考えられます。