UniForge 3Dがオープンソース化：数枚の写真から死角まで補完した3Dモデルを生成

UniForge 3Dは、数枚の写真を撮るだけで、死角まで完全に補完された3Dモデルを生成できるオープンソースの新しいツールだ。

従来の3Dスキャンは、撮影していない裏側や影になった部分が穴あきやメッシュの欠損になりがちだった。UniForge 3Dは、カメラの正確な位置情報がない少数の写真からでも、見えている表面を忠実に復元しながら、見えない領域をきれいに補って単一のアセットに仕上げてくれる。

見えている部分を復元し、見えない部分を補完する

最大の特徴は、「幾何学的再構成」と「生成モデルによる形状補完」の2つを同時に走らせる仕組みにある。再構成プロセスが写真に写っている細部を正確に拾い上げ、生成モデルが全体の構造を推測して裏側の形状を描き出す。

これまでの手法では、カメラ基準の再構成座標とモデル生成用の座標が噛み合わず、全視点の情報を無理に混ぜて表面のディテールがぼやける問題があった。UniForge 3Dは、共通のアンカー誘導空間を導入して物体の向きを一定に保つことで、この座標のズレを解消している。

さらに、ボクセル構造と各視点のポイントマップを連携させ、物体のパーツごとに最も情報量が多い写真を選んで特徴量を反映させる。この工夫により、不要な画像情報でディテールがかき消されるのを防いでいる。

得意な対象と導入方法

公開されている事例を見ると、フィギュアや彫刻、入り組んだ形状の小物などで高い効果を発揮している。Toys4KやGSOといった標準データセットでの検証でも、外観の質感と幾何学的精度の両面で従来モデルを上回るスコアを記録した。

コードと学習済みモデルはすでに一般公開されている。プロジェクトページにはローカル環境でのセットアップ手順がまとめられており、自分の手持ちの写真を使ってローカルPCで試すことが可能だ。

なぜ重要か

個人開発のゲームクリエイターや3Dプリント愛好家にとって、ローカルですぐ試す価値のあるツールだ。何十枚もの写真を厳密なライティングで撮り分けるフォトグラメトリの重い手間を、日常スナップ数枚のレベルまで引き下げてくれる。

純粋な生成AIは形状が破綻しやすく、純粋なスキャンツールは裏側が抜けるという長年の課題に対し、両者を無理なく組み合わせた設計は非常に現実的でスマートだ。今後の軽量な3Dアセット制作パイプラインの標準的なアプローチになっていくだろう。