Meta、3D復元向けデータセット「DTC」公開：2400点超を高精度再現

Meta の Reality Labs Research が公開した「Digital Twin Catalog（DTC）」は、3D 復元アルゴリズムの研究と開発に特化した超高精度データセットだ。実物と見分けがつかないレベルの 3D デジタルツイン生成モデルを訓練できる。

実物に対応する 2400 点超のサブミリ精度モデル

DTC には、物理世界に実在する製品や道具に対応した 2400 点以上の 3D モデルが収録されている。

従来の 3D データセットは合成データが中心で、幾何構造や質感が粗いものが多かった。DTC はサブミリメートル単位の幾何精度を持ち、手作りの陶器に見られるような微小な凹凸まで忠実に再現している。

形状だけでなく、テクスチャや光の反射率といったマテリアル特性も実物を正確に捉えている。NeRF や 3D Gaussian Splatting などの最新アルゴリズムを学習させる際、視点や照明が変わっても破綻しにくいのが強みだ。

日常の撮影から 3D を復元するために

このデータセットの主なターゲットは、わずかな写真から立体を立ち上げる「スパースビュー 3D 復元」の研究だ。

将来像として想定されているのは、スマートフォンやスマートグラスで数枚の写真を撮るだけで、高精度な商品モデルが自動生成される世界だ。Quest などの VR/AR ヘッドセット越しに、自宅にいながら実寸大の商品を自在に確認できるようになる。

高密度なメッシュと質感データを扱うため、学習とレンダリングには相応の GPU リソースが求められる。データセットは Meta AI の公式ブログ経由で研究者向けに公開されている。

なぜ重要か

これまでリアルなデジタルツインの制作には、熟練のテクニカルアーティストによる膨大な手作業とコストが必要だった。アカデミアや中小規模の開発チームにとって、実物と完全一致する大規模な教師データは手が出ない存在だったと言える。

NeRF や 3D Gaussian Splatting を用いた立体復元に取り組んでいる研究者なら、実空間とのギャップを埋めるための基準データとして今すぐ試す価値がある。