OpenAI, Sora 2 공개: 물리 법칙 시뮬레이션 개선과 음향 동기화, 전용 소셜 앱 출시

초기 AI 비디오 모델이 만들어낸 어색한 영상들을 기억할 것입니다. 슛이 빗나갔는데도 프롬프트를 억지로 맞추기 위해 농구공이 림 안으로 순간 이동하던 기괴한 물리 오류가 대표적입니다.

OpenAI가 마침내 그 한계를 넘어서는 후속작을 내놓았습니다. 9월 30일, OpenAI는 플래그십 비디오 및 오디오 생성 모델인 Sora 2를 발표하며 이를 비디오 분야의 'GPT-3.5 모멘트'라고 정의했습니다. 동시에 모델의 성능을 체감할 수 있는 독립형 소셜 iOS 앱 Sora도 함께 공개되었습니다.

빗나간 공이 백보드에 튕겨 나오는 물리 엔진

Sora 2의 가장 큰 도약은 현실 세계의 물리 법칙을 훨씬 더 정교하게 따른다는 점입니다.

기존 모델들이 텍스트 명령을 수행하기 위해 사물을 왜곡하거나 현실을 뭉개버렸다면, Sora 2에서는 선수가 슛을 놓쳤을 때 공이 자연스럽게 백보드를 맞고 튀어나옵니다. 패들보드 위에서 공중제비를 돌 때 나타나는 부력과 단단함의 역학 관계, 복잡한 기계체조 동작 등 이전 시스템에서는 불가능에 가까웠던 역동적인 장면들을 한층 매끄럽게 구현합니다.

여기에 오디오 동기화 기능이 기본으로 탑재되었습니다. Sora 2는 단순한 무음 영상 생성기가 아니라 정교한 주변 배경음, 효과음, 자연스러운 대화 음성을 영상과 정확히 맞춰 함께 합성해 냅니다.

여러 컷에 걸쳐 장면이 전환되어도 세계의 상태를 일관되게 유지하는 제어 능력을 갖췄으며, 실사풍은 물론 시네마틱, 애니메이션 스타일까지 자연스럽게 소화합니다.

나 자신을 영상 속 캐릭터로 소환하는 소셜 경험

기술적 향상 외에 OpenAI가 가장 공을 들인 기능은 '캐릭터(Characters)'입니다.

앱에서 짧은 1회성 영상 및 음성을 녹음해 신원을 인증하고 특징을 캡처하면, Sora 2가 생성하는 어떤 가상 환경이든 사용자의 외모와 목소리를 그대로 복제해 장면에 자연스럽게 배치할 수 있습니다. 텍스트, 이모티콘, 음성 메시지를 잇는 차세대 소통 방식으로 기획된 기능입니다.

OpenAI는 이 캐릭터 기능을 중심으로 돌아가는 전용 iOS 소셜 앱을 선보였습니다. 사용자들은 피드에서 영상을 감상하고 직접 창작할 뿐만 아니라, 친구의 캐릭터나 장면을 가져와 자유롭게 2차 가공(remix)할 수 있습니다.

소셜 미디어 중독이나 무의미한 스크롤 문제를 방지하기 위해 자연어로 조작 가능한 언어 모델 기반 추천 시스템을 도입했으며, 체류 시간이 아닌 창작 활동 극대화를 목표로 설계했다고 밝혔습니다. 청소년 보호를 위한 일일 시청 제한과 강화된 캐릭터 사용 권한, ChatGPT를 통한 자녀 보호 기능도 마련되었습니다.

현재 Sora iOS 앱은 미국과 캐나다에서 초대제로 우선 출시되었으며, 초대를 받은 사용자는 웹 사이트 sora.com에서도 이용할 수 있습니다. 초기에는 넉넉한 무료 사용 한도가 제공되며, ChatGPT Pro 구독자는 고품질 실험 모델인 Sora 2 Pro를 이용할 수 있습니다.

왜 중요한가

고성능 세계 시뮬레이션 모델을 전문가용 작업 도구에 가두지 않고 대중 소셜 네트워크 형태로 출시한 것은 매우 흥미롭고 공격적인 전략입니다.

일반 창작자와 사용자 입장에서 비디오와 음향이 한 번에 완결되는 파이프라인은 영상 제작의 장벽을 완전히 허물어뜨립니다. 기존에는 영상 생성, 효과음 믹싱, 립싱크를 각기 다른 도구에서 처리해야 했지만, 이제는 한 번의 생성으로 온전한 숏폼 콘텐츠를 뽑아낼 수 있습니다. 다만 연산 자원의 한계가 여전한 만큼, 대기 시간 없이 대규모 고화질 영상을 마음껏 렌더링하기까지는 다소 시간이 걸릴 것으로 보입니다.

업계 전반으로 보면 경쟁의 판도가 뒤흔들렸습니다. Runway나 Kling 같은 경쟁사들이 방송·영화 스튜디오나 전문 크리에이터 워크플로를 잡기 위해 경쟁하는 동안, OpenAI는 틱톡과 인스타그램이 장악한 소셜 영역으로 직행했습니다. 생성 비디오가 단순한 '시각적 결과물'이 아니라 '친구와 주고받는 놀이 문화'가 될 경우 플랫폼의 락인 효과는 완전히 다른 차원이 됩니다.

물론 초상권과 안전 문제는 가장 큰 시험대입니다. OpenAI는 본인의 캐릭터가 포함된 영상 초안까지 상시 확인하고 삭제하거나 권한을 철회할 수 있는 강력한 통제권을 부여했습니다. 하지만 완벽에 가까운 실사 합성 기술이 지인 기반 소셜 네트워크와 결합했을 때 발생할 수 있는 괴롭힘이나 사칭 문제를 기술적 장치만으로 완벽히 통제할 수 있을지는 계속 지켜봐야 할 부분입니다.