건즈 앤 로지스 신곡 뮤직비디오 비하인드: 언리얼 엔진과 SD 결합한 AI 연출

뮤직비디오는 다이어 스트레이츠의 3D 애니메이션부터 마이클 잭슨의 모핑 기법까지 늘 신기술의 최전선 실험실이었습니다. 전설적인 록 밴드 건즈 앤 로지스가 신곡 'The General' 뮤직비디오에서 생성형 AI를 과감하게 끌어들였습니다.

밴드의 오랜 비주얼 파트너인 크리에이티브 웍스 런던은 단순한 텍스트 프롬프트 생성에 기대지 않고, 언리얼 엔진 3D 파이프라인과 스테이블 디퓨전을 결합한 하이브리드 워크플로를 구축했습니다.

언리얼 엔진으로 뼈대를 잡고, 스테이블 디퓨전으로 '꿈을 꾸다'

영상은 보랏빛 도시에서 어린 소년이 악몽 같은 어린 시절 장난감들에게 위협받는 기괴한 분위기를 담고 있습니다. 댄 포터 크리에이티브 디렉터는 당초 6주간 언리얼 엔진으로 전체 3D 애니메이션을 제작하고 있었습니다.

하지만 밴드 매니저로부터 AI 관련 소식을 접한 뒤, 포터는 5일간 스튜디오에 틀어박혀 제작 중이던 언리얼 엔진 렌더링 결과물을 스테이블 디퓨전에 직접 투입하는 파이프라인을 설계했습니다.

밴드 특유의 시각적 정체성을 지키기 위해 스튜디오가 과거 건즈 앤 로지스를 위해 작업했던 아트워크 데이터를 기반으로 하이퍼네트워크를 직접 학습시켰습니다. 6~7명의 아티스트가 정교하게 설계한 카메라 워크와 모션 데이터를 밑바탕에 깔고, 그 위에 AI가 매 프레임을 덧칠하듯 이미지를 꿈꾸게 만들었습니다.

그 결과 AI가 프레임마다 세부 묘사를 다르게 계산하면서 곰 인형이 의자로 해체되고 히에로니무스 보스의 그림 같은 기괴한 생체 기계가 깜빡거리며 나타나는 독특한 환각적 영상미가 완성됐습니다. 액슬 로즈의 실제 라이브 영상도 '미래적인 사이코 록스타' 프롬프트로 변환됐으며, 영상 곳곳에 수작업 그래피티와 GNR 및 AI가 숨겨진 로고 이스터에그를 얹어 손맛을 유지했습니다.

포터는 다음 단계로 콘서트 현장 대형 전광판 시스템에 실시간 AI와 증강현실을 결합해, 관객이 특수 안경을 쓰면 무대 위 밴드 주변으로 환각적인 비주얼이 실시간 폭발하는 연출까지 테스트하고 있습니다.

왜 중요한가

영상 창작자들에게 이번 프로젝트는 상용 프로젝트에서 AI를 통제하는 가장 현실적인 모범 답안을 보여줍니다. 현재 텍스트 비디오 모델은 카메라 구도나 캐릭터 일관성을 완벽히 제어하기 어렵지만, 3D 툴로 공간과 움직임을 먼저 단단히 고정하고 AI를 텍스처와 스타일 변환 엔진으로 쓰면 이 문제를 해결할 수 있습니다.

우리는 이 접근법이 매우 영리하다고 봅니다. 아티스트의 일자리를 대체하겠다고 나서는 대신, 아티스트가 공들여 만든 3D 렌더링에 폭발적인 스타일 다양성을 불어넣는 도구로 AI의 역할을 한정했기 때문입니다.

물론 한계도 명확합니다. 프레임 간 깜빡임과 모핑 현상은 사이키델릭한 록 음악의 악몽 콘셉트에는 완벽하게 맞아떨어졌지만, 일반적인 서사 영상물에서는 관객의 피로도를 높이는 결함이 될 수 있습니다. 그럼에도 완전 자율 생성형 비디오가 성숙하기 전까지, 기존 CG 파이프라인과 AI를 접목한 이 같은 하이브리드 방식은 프로 프로덕션이 지금 당장 도입할 수 있는 가장 강력한 제작 모델로 보입니다.