비글, 기존 영상 카메라 앵글·시간 마음대로 바꾸는 '메리디안' 공개

메리디안(Meridian)은 비글 AI(Viggle AI)가 선보인 기하 정보 기반의 오픈소스 비디오 모델로, 기존 영상이나 단 한 장의 사진을 활용해 카메라 앵글과 시간 재생 흐름을 완전히 새롭게 연출할 수 있도록 돕는 도구다. 피사체 주변을 회전하는 오빗 샷이나 패닝은 물론, 격렬한 동작 도중 시간을 정지시키는 매트릭스 스타일의 '불릿 타임' 효과도 손쉽게 구현할 수 있다.

무엇을 할 수 있나

24fps 규격의 연속된 영상이나 사진을 입력하면, 사용자가 3차원 공간에서 원하는 카메라 이동 궤적을 자유롭게 지정할 수 있다.

예를 들어 볼더링이나 농구 덩크슛 영상에서 점프 순간 프레임을 정지시키고 카메라를 35도 회전시킨 뒤, 다시 착지 동작을 이어 재생하는 연출이 가능하다.

결과물은 24fps로 출력되며, 16:9 화면비 기준 1344×768 해상도를 지원한다. 생성 가능한 길이는 73프레임부터 243프레임까지로, 한 번에 약 3초에서 10초 분량의 컷을 만들어낼 수 있다.

어떤 원리로 동작하나

메리디안은 영상을 무작정 상상해서 생성하는 대신, 3차원 기하 복원과 확산 모델 인페인팅을 결합하는 방식을 택했다.

첫 단계로 VGGT-Omega 시스템이 입력 영상의 깊이와 카메라 위치를 추정해 색상이 입혀진 3D 포인트 클라우드로 변환한다.

그다음 사용자가 설정한 카메라 경로에 맞춰 해당 포인트 클라우드를 거칠게 렌더링한다. 기존 화각에 담기지 않은 사각지대는 회색 빈 공간으로 남겨지며, 이 단계는 가볍기 때문에 브라우저에서 실시간으로 구도와 움직임을 미리 확인할 수 있다.

마지막으로 원본 영상과 회색 영역이 포함된 기하 참조 영상을 미니맥스 H3(MiniMax-H3) 모델에 함께 전달해, 모델이 빈 공간을 채우고 디테일을 매끄럽게 완성한다.

모델은 전체를 새로 배포하는 대신 각각 2.5GiB 크기의 LoRA 어댑터 2개(기하 인식을 위한 티처와 4스텝 고속 생성을 위한 터보) 형태로 제공된다.

실행 방법과 사양

로컬 환경에서 직접 실행하려면 상당한 고사양 하드웨어가 필요하다.

기반 모델인 미니맥스 H3의 가중치 용량만 약 61.7GiB에 달해, 현재 공식 코드는 대용량 VRAM을 갖춘 CUDA 환경을 요구한다. 아직 공식 스크립트에서 양자화나 CPU 오프로딩을 지원하지는 않지만, 개발팀은 RTX 4090 같은 소비자용 GPU 포팅 작업을 커뮤니티에 적극 권장하고 있다.

코드와 LoRA 가중치, 샘플 데이터는 허깅페이스(Hugging Face)에 모두 공개되어 있다.

터미널 CLI뿐만 아니라 8412 포트로 열리는 로컬 웹 스튜디오 프로토타입을 통해 키프레임을 직접 제어할 수 있으며, 전용 ComfyUI 노드와 워크플로 파일도 함께 제공된다. 다만 기하 정보 추출에 쓰이는 VGGT-Omega는 비상업적 라이선스가 적용되어 별도로 설치해야 한다.

왜 중요한가

영상 편집자와 특수효과 작업자에게 메리디안은 촬영 현장의 아쉬움을 달래주는 강력한 사후 제어 도구다. 과거에는 수많은 카메라를 둥글게 배치해야만 가능했던 불릿 타임이나 역동적인 카메라 무빙을 단일 앵글 영상만으로 후반 작업에서 만들어낼 수 있기 때문이다.

단순한 텍스트 프롬프트 기반 영상 생성과 달리, 3차원 포인트 클라우드를 가이드라인으로 삼기 때문에 피사체의 형상이 뒤틀리지 않고 카메라 움직임도 매우 정교하다.

현재 60GiB가 넘는 기본 모델 크기 탓에 일반 사용자가 선뜻 돌려보기는 어렵지만, 거대 모델을 직접 건드리지 않고 LoRA와 기하 렌더링을 영리하게 결합한 구조는 인상적이다. 커뮤니티를 통해 4비트 양자화나 최적화가 이뤄진다면 영상 2차 창작과 버추얼 프로덕션 파이프라인에서 필수적인 도구로 자리 잡을 것으로 보인다.