跳到正文
IFAI

AI科研

Meta 釋出 3D 資料集 DTC:2400 多個真實物體,精度達亞毫米級

首次發布 傳播指數 31

Meta 旗下 Reality Labs 推出 3D 重建資料集 Digital Twin Catalog(DTC),收錄超過 2400 個對應真實物體的 3D 模型。模型幾何精度達亞毫米級,包含真實材質與光照反射細節。該資料集旨在打破高保真資料成本過高的瓶頸,加速電商與 AR 領域的數字孿生落地。

Meta 釋出 3D 資料集 DTC:2400 多個真實物體,精度達亞毫米級
圖:ai.meta.com

Meta Reality Labs Research 推出的 Digital Twin Catalog(DTC)是一個專門面向 3D 重建研究的高精度物體資料集。它能幫研究人員和開發者訓練出視覺上與實物無異的 3D 數字孿生模型。

2400 個真實物體與亞毫米級精度

DTC 收錄了超過 2400 個 3D 物體模型,每一個模型都有現實物理世界中的實物與之對應。

過去學術界能拿到的 3D 資料集,要麼是純人工合成的粗糙模型,要麼缺乏真實的表面細節。DTC 的幾何結構精度做到了亞毫米級,連手工陶器上的細微凹凸起伏都能精準還原。

除了形狀準,它的表面紋理和光照反射特性也完全對齊實物。這意味著拿它來訓練神經輻射場(NeRF)或者 3D 高斯潑濺(Gaussian Splatting)等演算法時,無論視角和光影怎麼變,渲染出來的模型都不會發假。

面向日常拍攝與空間顯示

這套資料集的核心目標,是攻克稀疏視角下的 3D 重建難題。

Meta 設想的場景很簡單:未來小店老闆只要拿手機或智慧眼鏡對著剛出爐的花瓶隨手拍幾張,演算法就能自動生成高保真的 3D 模型;顧客戴著 Quest 頭顯或 AR 眼鏡,就能直接把虛擬花瓶擺在自家角落看搭配。

要處理包含亞毫米級網格和高精貼圖的海量 3D 資產,對顯示卡算力和儲存空間的要求都不低。資料由 Meta 官方釋出,相關研究團隊可以通過 Meta AI 的研究頁面獲取並下載。

為什麼重要

在 DTC 出現之前,學術界和中小團隊幾乎不可能靠自己的力量收集這種級別的資料。手工精細建模幾千個實物資產的成本極高,連大公司都覺得吃力,更別提獨立實驗室了。

和市面上常見的合成數據集相比,DTC 最大的殺手鐧就是直接對應現實實物。如果你正在做基於 NeRF 或 Gaussian Splatting 的 3D 物體重建與空間渲染,這個資料集非常值得第一時間下載測試。

來源 (1)

  1. [1]
    ai.meta.com(在新分頁開啟)原文ai.meta.com

每日 AI 內容精選