런웨이, 차세대 AI 'Gen-4' 발표…유료 구독자에 이미지-비디오 기능 제공

생성형 AI로 영상을 만들 때 가장 큰 걸림돌은 카메라 앵글을 조금만 바꿔도 주인공의 얼굴이 완전히 딴판으로 변해버리는 문제였습니다.

Runway가 3월 31일 미디어 생성과 세계 일관성에 초점을 맞춘 차세대 AI 모델 시리즈 Gen-4를 공개했습니다.

Gen-4의 이미지 투 비디오 기능은 공개 당일부터 모든 유료 플랜 구독자와 엔터프라이즈 고객을 대상으로 순차 배포되기 시작했습니다. 유료 플랜은 월 12달러부터 시작하며, 1회성 무료 체험도 제공됩니다.

참조 이미지 한 장으로 캐릭터 고정

Gen-4에서 가장 주목받는 기능은 레퍼런스라는 새로운 도구입니다.

그동안 영상 생성 모델의 고질적인 한계는 특정한 인물, 장소, 사물을 일관되게 유지하기 어렵다는 점이었습니다. Runway에 따르면 레퍼런스 기능을 사용할 경우 단 한 장의 참조 이미지만으로 다양한 조명, 배경, 연출 스타일 속에서도 동일한 캐릭터를 연속해서 생성할 수 있습니다.

작품 특유의 색감과 분위기, 시네마틱한 요소를 해치지 않으면서도 한 장면 안에서 여러 각도와 시점으로 동일한 대상을 다시 잡아낼 수 있는 수준까지 발전했습니다.

Runway는 실사 촬영본이나 애니메이션, 시각특수효과 파이프라인에 그대로 얹어 쓸 수 있는 수준의 결과물을 제공하는 최초의 모델이라고 설명했습니다. 다만 레퍼런스 기능과 API는 이미지 투 비디오 기능보다 조금 늦게 순차적으로 제공될 예정입니다.

물리 법칙 시뮬레이션 개선

일관성뿐만 아니라 사물의 움직임과 물리 법칙 시뮬레이션도 손을 봤습니다.

Runway는 Gen-4가 현실 세계의 물리 법칙을 훨씬 정교하게 이해하고 있으며, 주요 물리 벤치마크 테스트에서 기존 경쟁 모델들을 큰 격차로 앞질렀다고 밝혔습니다.

이를 통해 피사체가 갑자기 허공으로 녹아내리거나 기괴하게 비틀리는 현상을 줄이고 한층 역동적이면서도 자연스러운 움직임을 연출할 수 있습니다.

왜 중요한가

Runway의 이번 업데이트는 영상 AI 시장의 경쟁 초점이 화려한 화질 경쟁에서 현장 통제력과 예측 가능성으로 완전히 이동했음을 보여줍니다.

아무리 해상도가 높아도 컷과 컷이 이어지지 않는다면 전문 제작 환경에서는 장난감에 불과합니다. 단 한 장의 사진으로 일관된 캐릭터와 공간을 유지하며 다각도 숏을 뽑아낼 수 있다면, 독립 영화 제작자나 광고 스튜디오의 스토리보드 및 프리비즈 작업 방식이 획기적으로 바뀔 수 있습니다.

다만 업계 최초이자 유일한 상업 제작용 결과물이라는 회사의 주장은 실제 검증을 거쳐봐야 합니다. 가장 핵심 무기인 레퍼런스 기능이 당장 풀리지 않고 추후 출시로 잡혀 있는 만큼, 복잡한 동선이나 극단적인 조명 변화에서도 얼굴이 무너지지 않는지는 기능이 정식 도입된 뒤 꼼꼼히 따져볼 필요가 있습니다.

현재 유료 플랜을 쓰고 있는 크리에이터라면 새로 열린 이미지 투 비디오로 물리 표현을 먼저 시험해볼 만하며, 일관성 기능을 노리는 신규 사용자라면 레퍼런스 기능의 정식 배포 반응을 지켜보고 결제하는 편이 합리적입니다.