도메인 셔틀: 다양한 참조 이미지의 일관성을 유지하는 오픈소스 비디오 생성기
여러 장의 참조 이미지를 바탕으로 캐릭터 일관성을 유지하는 비디오 생성 도구 Domain Shuttle이 공개됐다. 실사 인물, 2D 애니메이션, 3D 캐릭터가 섞여 있어도 프롬프트에 맞춰 한 장면에 자연스럽게 배치할 수 있다. Wan 2.2 기반으로 제작되었으며, 깃허브에 코드와 35GB 모델 가중치가 공개됐다.
여러 장의 참조 이미지를 바탕으로 캐릭터 일관성을 유지하는 비디오 생성 도구 Domain Shuttle이 공개됐다. 실사 인물, 2D 애니메이션, 3D 캐릭터가 섞여 있어도 프롬프트에 맞춰 한 장면에 자연스럽게 배치할 수 있다. Wan 2.2 기반으로 제작되었으며, 깃허브에 코드와 35GB 모델 가중치가 공개됐다.
연구팀이 Wan2.2 기반의 FPS 인터랙티브 월드 모델 SCOPE를 오픈소스로 공개했다. 이동과 조준, 사격 등 10자유도 조작을 프레임 단위로 비디오에 반영하며, 처음 보는 게임 환경에서도 제로샷으로 동작한다. 모델 가중치와 추론 코드, 데이터셋이 모두 GitHub에 공개됐다.
게임 월드 모델 ReactiveGWM이 공개되었다. 플레이어의 키 조작과 NPC의 행동 전략을 분리해, 프롬프트로 적의 공격이나 수비 전술을 제어할 수 있다. Wan 2.2를 기반으로 하며 로컬 중고급 GPU에서 직접 실행할 수 있다.
AI가 생성한 영상에서 일관된 3D 세계를 재구성하는 기술인 'World Reconstruction from Inconsistent Views'가 공개됐다. 영상 프레임 간의 기하학적 모순과 왜곡을 비강체 정렬로 보정해 단 한 편의 영상으로도 깔끔한 3D 장면을 복원한다. 특정 영상 모델에 구애받지 않고 기존 비디오 생성기를 3D 공간 생성 도구로 탈바꿈시킨다는 점이 핵심이다.
robbyant가 Wan2.2 기반 월드 시뮬레이터 'LingBot-World'를 공개했다. 텍스트나 이미지로 480P 및 720P 인터랙티브 환경을 16 FPS, 1초 미만 지연 속도로 생성하며 분 단위 장기 일관성을 유지한다. 폐쇄형 인터랙티브 모델에 맞서는 유의미한 오픈소스 대안이다.
힉스필드 AI(Higgsfield AI)가 오픈소스 모델 WAN 2.2를 자사 플랫폼에 적용했다. 비디오 및 이미지 생성을 모두 지원하며, 30개 이상의 프리셋을 통해 클릭 한 번으로 빠른 렌더링이 가능하다.