跳到正文
IFAI

AI科研

Meta 发布 3D 数据集 DTC:2400 多个真实物体,精度达亚毫米级

首次发布 传播指数 31

Meta 旗下 Reality Labs 推出 3D 重建数据集 Digital Twin Catalog(DTC),收录超过 2400 个对应真实物体的 3D 模型。模型几何精度达亚毫米级,包含真实材质与光照反射细节。该数据集旨在打破高保真数据成本过高的瓶颈,加速电商与 AR 领域的数字孪生落地。

Meta 发布 3D 数据集 DTC:2400 多个真实物体,精度达亚毫米级
图:ai.meta.com

Meta Reality Labs Research 推出的 Digital Twin Catalog(DTC)是一个专门面向 3D 重建研究的高精度物体数据集。它能帮研究人员和开发者训练出视觉上与实物无异的 3D 数字孪生模型。

2400 个真实物体与亚毫米级精度

DTC 收录了超过 2400 个 3D 物体模型,每一个模型都有现实物理世界中的实物与之对应。

过去学术界能拿到的 3D 数据集,要么是纯人工合成的粗糙模型,要么缺乏真实的表面细节。DTC 的几何结构精度做到了亚毫米级,连手工陶器上的细微凹凸起伏都能精准还原。

除了形状准,它的表面纹理和光照反射特性也完全对齐实物。这意味着拿它来训练神经辐射场(NeRF)或者 3D 高斯泼溅(Gaussian Splatting)等算法时,无论视角和光影怎么变,渲染出来的模型都不会发假。

面向日常拍摄与空间显示

这套数据集的核心目标,是攻克稀疏视角下的 3D 重建难题。

Meta 设想的场景很简单:未来小店老板只要拿手机或智能眼镜对着刚出炉的花瓶随手拍几张,算法就能自动生成高保真的 3D 模型;顾客戴着 Quest 头显或 AR 眼镜,就能直接把虚拟花瓶摆在自家角落看搭配。

要处理包含亚毫米级网格和高精贴图的海量 3D 资产,对显卡算力和存储空间的要求都不低。数据由 Meta 官方发布,相关研究团队可以通过 Meta AI 的研究页面获取并下载。

为什么重要

在 DTC 出现之前,学术界和中小团队几乎不可能靠自己的力量收集这种级别的数据。手工精细建模几千个实物资产的成本极高,连大公司都觉得吃力,更别提独立实验室了。

和市面上常见的合成数据集相比,DTC 最大的杀手锏就是直接对应现实实物。如果你正在做基于 NeRF 或 Gaussian Splatting 的 3D 物体重建与空间渲染,这个数据集非常值得第一时间下载测试。

来源 (1)

  1. [1]
    ai.meta.com(在新标签页打开)原文ai.meta.com

每日 AI 内容精选