UniForge 3D 開源:幾張多角度照片,就能腦補出完整 3D 模型
3D 重建與生成框架 UniForge 3D 開源。它只需物體不同角度的幾張稀疏照片,就能生成包含背面等盲區的完整 3D 資產;系統一邊精準重建可見細節,一邊靠生成模型腦補缺失結構。目前相關程式碼和模型已開放本地執行。

UniForge 3D 是一個剛開源的 3D 建模工具,能把你隨手拍的幾張多角度照片,直接拼成一個完整的 3D 模型。
平時做 3D 掃描,最頭疼的就是盲區。拍照總有拍不到的死角、背面或者被遮擋的角落,而傳統重建演算法遇到沒拍到的地方通常就直接留空或破面。UniForge 3D 解決的就是這個問題,哪怕輸入的是幾張沒有標註相機姿態的稀疏照片,它也能把沒拍到的部分自動補全。
一邊精準掃描,一邊合理腦補
它的核心思路是把「3D 重建」和「AI 生成」兩條路線合在了一起。重建負責把照片裡能看清的幾何形狀抓得死死的,生成模型則負責根據物體的整體規律,把背面和盲區合理地猜出來。
很多類似工具做不好,是因為掃描和生成各自用的座標系合不上,而且容易把不相關的視角混在一起,導致表面細節被抹平。UniForge 3D 專門搭了一個共享的錨定引導空間,讓物體保持站立狀態,並以參考視角為基準統一座標。
在這個空間裡,負責重建和負責生成的兩個模組會互相傳遞特徵。系統先生成一個完整的稀疏體素骨架,再反過來對應到各個輸入畫面,給物體的每個區域性挑選最清楚、最有參考價值的拍攝角度來提取細節,避免細節被無關畫面沖淡。
能生成什麼,去哪下載
從官方給出的測試來看,它很適合處理各種角色手辦、雕像以及結構複雜的日用品。在 Toys4K 和 GSO 等標準 3D 資料集上,它的外觀質感和幾何精度都達到了目前同類方法的頂尖水平,生成的模型不僅背面完整,正面的細節也更清晰。
目前研究團隊已經把 UniForge 3D 的程式碼和模型權重全部開源。專案主頁提供了完整的配置與安裝教程,支援開發者在本地電腦上部署執行,可以直接拿著自己的照片測試生成效果。
為什麼重要
如果你是獨立遊戲開發者、3D 列印愛好者,或者正在給虛擬場景搭資產,這個專案非常值得拉到本地試一試。它把過去需要幾十張嚴密照片加專業光照的攝影測量門檻,直接降到了隨手拍幾張圖的水平。
在業界還在糾結「純生成模型容易天馬行空、純掃描工具死角修不完」的時候,UniForge 3D 這種把區域性重建與全域性生成綁在一起的做法顯得非常聰明。它沒有丟棄真實照片裡的畫素精度,又解決了死角補全的剛需,很可能會成為後續輕量級 3D 資產生成工具的標準架構。
來源 (1)
- arxiv.org(在新分頁開啟)原文arxiv.org