字節跳動提出 Lucida:把雜亂房間變成可編輯的 3D 場景
字節跳動研究團隊提出可組合 3D 場景建模系統 Lucida。它先識別影片中的每個獨立物體並分別構建 3D 資產,再由 VLM 閉環擺回原位,解決了傳統 3D 掃描模型融成一體無法單獨編輯的難題,為具身智慧提供了現成的互動模擬環境。
字節跳動研究團隊提出可組合 3D 場景建模系統 Lucida。它先識別影片中的每個獨立物體並分別構建 3D 資產,再由 VLM 閉環擺回原位,解決了傳統 3D 掃描模型融成一體無法單獨編輯的難題,為具身智慧提供了現成的互動模擬環境。
開源背景摳圖模型 Lucida 釋出。該模型體積不足 900MB,專門針對半透明玻璃、迷彩、文字陰影及髮絲等常規模型容易翻車的邊緣進行微調。專案程式碼、權重與資料集均按 MIT 協議完全開源,在普通消費級顯示卡上就能直接本地執行。