PixVerse R2 공개: 생성된 영상 속으로 들어가 실시간 조작하는 세계 모델

지금까지의 생성형 AI 비디오가 완성된 영상을 수동적으로 감상하는 방식이었다면, 이제는 사용자가 직접 화면 속으로 걸어 들어가 실시간으로 개입하는 방향으로 나아가고 있습니다.

PixVerse는 생성형 인터랙티브 미디어를 위한 실시간 세계 모델 'PixVerse R2'를 공개했습니다. 사용자는 AI가 생성한 세계 안에서 자연어와 실시간 조작을 통해 캐릭터의 반응과 배경, 스토리 전개를 즉각적으로 바꿀 수 있습니다.

실시간으로 조작하며 유지되는 세계

일반적인 비디오 생성 모델은 렌더링이 끝나면 내용을 수정하기 어렵습니다. 반면 PixVerse R2는 다중 모달 이해와 장기 맥락 모델링, 그리고 반응형 시청각 생성을 단일 세계 모델로 통합했습니다.

사용자의 상호작용을 매 순간 해석하면서도 세계의 상태를 일관되게 유지하고, 다음에 이어질 시청각 장면을 끊김 없이 연속으로 생성해 냅니다. 공개된 체험 사례에는 상호작용에 반응하는 캐릭터 스토리와 동적으로 진화하는 가상 공간이 포함되었습니다.

왜 중요한가

우리는 비디오 생성이 단순한 영상 제작 도구를 넘어, 실시간으로 플레이 가능한 인터랙티브 환경으로 진화하는 중요한 전환점에 들어섰다고 봅니다.

전통적인 게임 엔진 없이도 자연어와 입력만으로 인터랙티브 스토리 콘텐츠를 제작할 수 있는 가능성을 보여주었다는 점에서 의미가 큽니다. 다만 실시간 생성 환경에서는 세부 묘사의 품질 저하나 장기적인 논리적 모순이 발생하기 쉽습니다. R2가 실제 사용 환경에서 세계의 일관성을 얼마나 안정적으로 유지할 수 있을지가 성패를 가를 핵심이 될 것입니다.