엔비디아, 휴머노이드 로봇 도구 대거 공개…Isaac Lab 및 GR00T 워크플로 출시

엔비디아가 로봇 제어 정책 훈련을 위한 오픈소스 시뮬레이션 프레임워크인 Isaac Lab 1.2를 정식 공개했습니다. 여기에 세계 모델 구축을 위한 고속 영상 토크나이저 Cosmos와 휴머노이드 로봇 전용 Project GR00T 워크플로가 함께 제공되어, 복잡한 로봇 학습 과정을 대폭 단축할 수 있습니다.

Isaac Lab은 NVIDIA Omniverse와 OpenUSD 표준을 기반으로 구축되었으며, 이족보행 휴머노이드부터 사족보행 로봇, 협동 로봇 팔까지 다양한 기기 형태에 모두 적용할 수 있습니다.

무엇을 할 수 있나

Isaac Lab의 핵심 기능은 고정밀 물리 시뮬레이션 환경에서 수천 대의 가상 로봇을 병렬로 구동하며 강화학습을 수행하는 것입니다. 하드웨어 손상 없이 대규모 데이터를 쌓아 실제 로봇에 적용할 제어 정책을 훈련할 수 있습니다.

현재 보스턴 다이내믹스, Agility Robotics, 1X, 유니트리, 샤오펑 로보틱스 등 유수의 로봇 기업들이 이미 도입해 활용 중입니다. 또한 Hugging Face와의 협업을 통해 오픈소스 로봇 프로젝트 LeRobot 및 Jetson 임베디드 보드와의 연동도 지원합니다.

가장 구현이 까다로운 휴머노이드 로봇을 위해 Project GR00T 전용 워크플로 6종도 공개되었습니다. 3D 가상 환경을 생성하는 GR00T-Gen, 모션 궤적을 만드는 GR00T-Mimic, 정밀 손 조작을 위한 GR00T-Dexterity, 전신 밸런스를 잡는 GR00T-Control, 이동 및 내비게이션을 담당하는 GR00T-Mobility, 멀티모달 센싱을 처리하는 GR00T-Perception으로 구성됩니다.

12배 빨라진 영상 토크나이저의 원리

로봇이 행동에 따른 환경 변화를 예측하는 세계 모델을 만들려면 수천 시간의 비디오 데이터를 학습해야 합니다. 이 과정에서 발생하는 막대한 연산 병목을 해결하기 위해 엔비디아는 오픈소스 Cosmos 토크나이저를 선보였습니다.

Cosmos는 왜곡과 시간적 불안정성을 최소화하면서 고화질 영상을 효과적으로 압축하며, 기존 토크나이저 대비 최대 12배 빠른 복원 속도를 냅니다. 휴머노이드 기업 1X는 이미 자사 챌린지 데이터셋에 Cosmos를 도입해 연산 효율을 크게 끌어올렸습니다.

대규모 영상 정제를 위한 NeMo Curator 도구도 개선되어, 멀티 GPU 환경에서 최대 100페타바이트 이상의 데이터를 다룰 수 있으며 최적화 전 대비 처리 속도가 최대 7배 향상되었습니다.

이용 방법과 사양

Isaac Lab 1.2 코드는 GitHub에 공개되어 있으며 이전 버전인 Isaac Gym 사용자를 위한 마이그레이션 문서가 함께 제공됩니다. Cosmos 토크나이저는 GitHub와 Hugging Face에서 내려받을 수 있습니다. NeMo Curator 비디오 모듈은 11월 말 배포 예정입니다.

원활한 구동을 위해서는 Omniverse 시뮬레이션을 지원하는 엔비디아 RTX 기반 GPU 환경이 필요하며, 대규모 세계 모델 훈련에는 멀티 GPU 노드가 요구됩니다.

왜 중요한가

로봇 제어나 물리 기반 AI를 연구하는 개발자라면 지금 바로 테스트해 볼 가치가 충분합니다. 시뮬레이션 환경 구축과 고속 영상 전처리 파이프라인처럼 구축 난도가 높은 인프라를 바닥부터 만들 필요 없이 완성도 높은 오픈소스 도구로 즉시 시작할 수 있습니다.

결국 엔비디아 GPU 인프라에 묶이게 된다는 구조적 한계는 있지만, 최고 수준의 시뮬레이터와 최적화 도구를 오픈소스로 선제 제공함으로써 차세대 피지컬 AI 시장의 핵심 소프트웨어 생태계를 완전히 선점하려는 매우 영리한 전략입니다.