엔비디아, 고품질 3D 메시 생성 기술 '플렉시큐브' 공개

AI로 3D 모델을 만드는 기술은 빠르게 발전했지만, 실제 게임이나 시각 효과 현장에서는 생성된 에셋을 곧바로 쓰지 못하고 버리는 경우가 많았습니다.

가장 큰 이유는 조잡한 메시 품질입니다. 생성된 모델의 표면 폴리곤이 뒤엉켜 있으면 리깅이나 애니메이션은 고사하고 간단한 물리 시뮬레이션조차 제대로 돌아가지 않기 때문입니다.

NVIDIA는 로스앤젤레스에서 열린 SIGGRAPH 2023에서 이 병목 현상을 해결할 새로운 메시 추출 기술인 FlexiCubes를 공개했습니다.

수십 년 된 마칭 큐브를 대체하다

3D 그래픽스 분야에서는 30년 넘게 마칭 큐브(Marching Cubes) 알고리즘을 사용해 볼륨 데이터에서 삼각 메시를 추출해 왔습니다.

하지만 이 고전적인 방식은 최근 각광받는 기울기 기반(Gradient-based) AI 최적화 파이프라인과 결합했을 때 미세한 디테일을 뭉개거나 표면을 거칠게 만드는 한계가 뚜렷했습니다.

FlexiCubes는 기존 워크플로를 뒤엎을 필요 없이 마칭 큐브 자리에 그대로 끼워 넣을 수 있는 드롭인(Drop-in) 대체재로 설계되었습니다.

메시를 추출하는 과정에 유연한 추가 파라미터를 도입해, AI가 모델을 최적화하는 동안 파라미터가 함께 업데이트되면서 복잡한 형태의 디테일을 정밀하게 살려냅니다.

생성 즉시 물리 엔진에 던져 넣는 메시

FlexiCubes는 사진 측량(Photogrammetry) 기반 복원과 최신 생성형 AI 파이프라인 모두에서 출력 품질을 대폭 끌어올립니다.

더 주목할 부분은 물리 시뮬레이션 지원입니다. 기존에는 AI가 만든 표면 메시를 물리 엔진에서 쓰려면 별도의 복잡한 볼륨 메시 변환 과정을 거쳐야 했습니다.

이 기술은 시뮬레이션에 즉시 투입 가능한 사면체 메시(Tetrahedral mesh)를 곧바로 추출해 냅니다. 별도 보정 없이도 충돌과 변형 연산을 안정적으로 처리할 수 있다는 뜻입니다.

해당 연구는 Flexible Isosurface Extraction for Gradient-Based Mesh Optimization이라는 제목의 논문과 프로젝트 페이지를 통해 상세 내용이 공개되었습니다.

왜 중요한가

3D 아티스트와 게임 개발자에게 있어 AI가 만든 에셋의 토폴로지를 일일이 손으로 정리하는 작업은 엄청난 시간 낭비였습니다. FlexiCubes를 통해 쓸 만한 메시가 처음부터 나온다면 상용 엔진 도입 장벽이 크게 낮아집니다.

3D 생성 AI 분야의 경쟁 축 역시 단순히 겉보기에 그럴듯한 형상을 뽑아내는 수준에서, 기존 산업 파이프라인과 얼마나 매끄럽게 연결되는지로 옮겨가고 있습니다.

우리는 NVIDIA의 이번 행보가 매우 영리하다고 평가합니다. 화려한 독립형 3D 생성 서비스를 내놓는 대신, 모든 생성 AI와 3D 엔진이 거쳐 가야 하는 인프라 단의 알고리즘 표준을 선점하려 들었기 때문입니다. 다만 여전히 최적화 연산에 의존하는 만큼, 대규모 실시간 파이프라인에서 연산 비용을 얼마나 효율적으로 유지할 수 있는지가 상용화의 관건이 될 것으로 보입니다.