머스크, 춤추는 테슬라 옵티머스 공개…가상 시뮬레이션 강화학습으로 훈련

휴머노이드 로봇이 춤을 추는 모습 자체는 이제 낯설지 않습니다. 하지만 일론 머스크가 최근 공개한 영상에서 진짜 주목해야 할 점은 춤 실력이 아니라 그 동작을 배운 방식입니다.

일론 머스크는 자신의 X 계정에 테슬라의 휴머노이드 로봇 옵티머스(Optimus)가 새로운 춤 동작을 선보이는 6초짜리 짧은 영상을 올렸습니다. 영상 속 옵티머스는 팔과 다리를 리드미컬하게 흔들며 상당한 균형 감각을 보여줬습니다. 이전의 뚝딱거리던 시연보다는 훨씬 부드럽고 자신감 있는 움직임이었지만, 솔직히 여전히 약간의 어색함과 기계적인 뻣뻣함은 남아 있었습니다.

머스크는 영상과 함께 "곧 더 많은 것이 공개됩니다! 팀이 무대 뒤에서 정말 열심히 일해 왔습니다"라는 글을 덧붙였습니다.

현실 대신 가상 공간에서 배운 춤

단순히 미리 짜인 스크립트대로 움직인 것이라면 새로울 게 없었을 것입니다. 하지만 머스크는 이번 동작이 시뮬레이션 환경에서 강화학습(RL)과 시행착오를 통해 100% 학습된 결과물이라고 설명했습니다.

로봇 공학에서 가상 환경의 학습 결과를 실제 물리 기체로 옮기는 '심투리얼(Sim-to-Real)'은 늘 가장 까다로운 난관으로 꼽힙니다. 가상 공간과 물리 현실 사이의 미세한 마찰력이나 모터 반응 차이, 이른바 '현실 격차(reality gap)' 때문에 시뮬레이션에서 완벽했던 제어도 실제 기계에서는 망가지기 일쑤입니다.

머스크는 테슬라의 심투리얼 파이프라인에 수많은 최적화와 수정 작업이 적용되었다고 밝혔습니다. 외신 Latestly에 따르면 익명의 테슬라 엔지니어 역시 옵티머스가 전적으로 가상 환경에서만 훈련받았음을 확인했습니다.

영상 속 옵티머스는 전선 연결 없이 작동했지만, 배경에는 안전 케이블이 설치되어 있었습니다. 머스크는 초기 결과물이라 만약의 넘어짐을 방지하기 위한 안전장치일 뿐 로봇을 지탱하고 있는 것은 아니라고 선을 그었습니다.

원격 조종 논란을 딛고 자율성 입증으로

2021년 사람이 쫄쫄이 옷을 입고 나와 춤을 추던 충격적인 첫 공개 이후, 2022년의 조심스러운 보행 프로토타입, 이후 물건 분류나 테니스공 잡기 시연에 이르기까지 옵티머스는 빠르게 발전해 왔습니다.

하지만 회의적인 시선도 만만치 않았습니다. 특히 2024년 10월 열린 테슬라의 'We, Robot' 행사 당시 현장에서 사람들과 소통하던 옵티머스 로봇들이 상당 부분 원격 조종(teleoperation)에 의존했다는 사실이 드러나면서 실망감을 안기기도 했습니다.

이번 자율적 실시간 적응 제어 시연은 이러한 원격 조종 논란을 불식시키려는 의도가 엿보입니다. 일각에서는 최근 몇 달간 화려한 기동성을 과시하고 있는 중국산 휴머노이드 로봇 군단을 의식한 견제구라는 해석도 나옵니다.

왜 중요한가

우리는 테슬라가 시뮬레이션 기반 강화학습 파이프라인을 현실 기체에 제대로 안착시키기 시작했다는 점에 주목해야 한다고 봅니다. 비싼 하드웨어를 수백 번 부숴가며 현실에서 가르칠 필요 없이 컴퓨터 안에서 수백만 번 굴려 제어기를 완성할 수 있다면 개발 주기와 비용이 획기적으로 줄어들기 때문입니다.

춤 동작 자체는 공장이나 가정에서 쓸모가 없지만, 춤을 추는 데 필요한 실시간 전신 균형 유지와 무게중심 이동 제어는 무거운 짐을 나르거나 험지를 걸을 때 필요한 핵심 기술과 정확히 같습니다. 기초 운동 신경망이 갖춰지면 다른 작업을 가르치는 속도도 빨라질 수밖에 없습니다.

다만 냉정하게 볼 부분도 있습니다. 안전선이 걸려 있는 환경에서 찍은 6초짜리 클립과 실제 산업 현장에서 묵묵히 일하는 것은 차원이 다른 문제입니다. 테슬라가 진정으로 증명해야 할 것은 소셜 미디어용 깜짝 영상이 아니라, 사람의 개입 없이 거친 실제 공정에서 불량 없이 연속 작업을 해내는 실전 생산성입니다.