Fast H3 Omni 공개: MiniMax H3 비디오 생성 최대 12배 가속, 8단계 샘플링 지원
오픈소스 비디오 모델 MiniMax H3를 위한 가속 기술 Fast H3 Omni가 공개됐다. 레퍼런스 기반 비디오 생성 시 일관성을 유지하도록 최적화됐으며, 샘플링 단계를 50회에서 8회로 줄여 최대 12배 빠른 추론 속도를 낸다. ComfyUI 및 Apple Silicon 최적화 모델도 함께 제공된다.
오픈소스 비디오 모델 MiniMax H3를 위한 가속 기술 Fast H3 Omni가 공개됐다. 레퍼런스 기반 비디오 생성 시 일관성을 유지하도록 최적화됐으며, 샘플링 단계를 50회에서 8회로 줄여 최대 12배 빠른 추론 속도를 낸다. ComfyUI 및 Apple Silicon 최적화 모델도 함께 제공된다.
제미나이 노트북이 슬라이드와 영상 개요 제작을 위한 공동 작업 흐름을 공개했다. 프롬프트에서 곧바로 완성본을 뽑아내는 대신, 'Review' 토글을 켜 개요와 프로듀서 노트를 미리 확인하고 스타일을 수정할 수 있다. 기능은 다음 주에 걸쳐 전 세계 사용자에게 순차 적용된다.
3D 캐릭터 애니메이션 제작을 간소화하는 도구 'GaussiAnimate'의 코드가 공개됐다. 내부 골격과 유연한 외부 표면 구조를 결합해, 기존 뼈대 방식으로는 표현하기 까다로웠던 의류와 동물의 복잡한 연체 변형을 손쉽게 제어할 수 있도록 돕는다.
캐릭터 이미지 한 장으로 스프링 본이 포함된 스타일화 3D 헤어 카드를 생성하는 모델 'HairDeck'이 오픈소스로 공개됐습니다. 기존 방식보다 33배 빠른 약 1초 만에 헤어를 생성하며, 즉시 애니메이션이 가능한 VRM 포맷으로 내보낼 수 있습니다. 2.45GB 크기로 일반 소비자용 GPU에서도 구동됩니다.
비글(Viggle)이 텍스트나 이미지를 자유롭게 탐색 가능한 3D 환경으로 변환하는 세계 모델 JST-2를 공개했다. 3D 공간의 물리적 단위를 직접 추적해 시점 이동에도 일관성을 유지하며, 리깅 없이 바로 움직이는 3D 캐릭터도 생성한다. 현재 웹 브라우저에서 3D 가우시안 스플래팅 형태로 무료 체험할 수 있다.
Cinetic은 짧은 브리프 한 줄로 디렉팅 워크플로를 거쳐 제품 출시 영상과 UI 모션을 제작해 주는 코드 기반 도구입니다. 텍스트, UI, 타임라인을 정밀하게 제어하며 음화 동기화 검사까지 지원해 코딩 에이전트와 연동한 마케팅 영상 제작에 적합합니다.
할리우드 배우 마크 월버그가 테크크런치 디스럽트에서 영화 제작 내 올바른 AI 활용을 지지한다고 밝혔다. 그는 신작 야구 영화의 경기장 연출에 AI를 도입할 계획이며, 실제 배우를 대체하지 않는 선에서 AI를 활용하는 것은 물론 자신의 사후 AI 복제본을 자녀들이 관리해 연기 활동을 잇는 것에도 열려 있다고 말했다.
코딩 에이전트가 소리를 듣고 분석할 수 있도록 지원하는 오픈소스 ‘Earshot’이 공개됐다. 영상이나 게임 제작 시 소리가 화면과 맞는지 점검하고 코드로 효과음을 직접 수정할 수 있는 것이 핵심이다. CPU 환경에서 로컬로 구동되어 사람이 일일이 확인하던 조율 작업을 줄여준다.
실베스터 스탤론이 팟캐스트를 통해 AI 디에이징(디지털 회춘) 기술을 활용한 영화 '람보' 프리퀄 제작을 모색 중이라고 밝혔다. 이미 테스트를 통해 18세 시절 모습을 구현했다고 덧붙였다. 할리우드의 AI 갈등 속에서도 전설적 배우들이 기술을 수용해 IP 수명을 늘리는 흐름이 이어지고 있다.
일레븐랩스가 업로드한 영상에 맞춰 오리지널 음악과 싱크된 효과음을 자동으로 생성하는 'Instant Soundtracks'를 공개했다. 영상 장면을 분석해 정확한 타임스탬프에 효과음을 배치하며, 기존 오디오를 참조한 생성과 트랙별 분리 편집도 지원한다. 현재 ElevenCreative 및 API를 통해 제공된다.
연구진이 단일 프레임워크에서 3D 인체 모션의 텍스트 기반 생성, 캡셔닝, 동작 보완 및 편집을 모두 지원하는 통합 모델 '뫼비우스(Möbius)'를 발표했다. 별도의 이산 토큰화 없이 프레임 단위 연속 모션을 직접 처리하며 최대 17억 파라미터까지 확장했다. 3D 애니메이션 제작 및 시각화 작업의 효율을 크게 높일 것으로 기대된다.
긴 AI 영상 생성 시 배경이 무너지는 문제를 해결하는 오픈소스 프레임워크 'Any Time, Any Space'가 공개됐다. 장면을 3D로 재구성해 메모리에 보관함으로써, 카메라가 다른 곳을 비췄다 돌아와도 이전 방을 그대로 유지한다. Wan 등 다양한 영상 모델과 호환된다.
영상 생성 스타트업 힉스필드 AI는 GPT-6 아스트라를 도입해 AI 영상 제작 길이를 1분 안팎에서 10분 이상으로 늘렸다고 밝혔습니다. 에이전트가 외부 3D 도구를 직접 제어해 화면 일관성을 유지하며, 말하는 대로 실시간 렌더링되는 음성 제작 기능도 준비 중입니다.
텐센트와 홍콩대 연구진이 가상 환경에서 다수의 플레이어가 상호작용하는 월드 모델 'Multix'를 공개했다. 플레이어별 시점을 개별 생성하면서 환경과 움직임을 실시간 동기화하며, 계층형 통신을 통해 연산 비용을 86% 이상 줄였다. 4인 데이터 학습만으로 10인까지 확장된다.
오픈AI가 영상 생성 AI 모델 '소라(Sora)'를 할리우드 거물 제프리 카젠버그 등이 설립한 스타트업에 라이선스 아웃하는 방안을 논의 중이다. 오픈AI는 신생 팀에 영상 소프트웨어 개발을 맡기고 지분을 확보해 막대한 인프라 비용을 회수하려는 구상이다.
엔비디아가 MiniMax H3 기반의 'Stream Render H3' 모델과 코드를 공개했다. 게임 엔진의 단순한 색상 시맨틱 맵을 받아 실시간으로 영화 수준의 비주얼을 생성하며 참조 이미지로 스타일 변경도 지원한다. 다만 실시간 구동에는 GP200 GPU 8장과 200GB 이상의 용량이 필요하다.
3D 재구성 모델 Pure가 오픈소스로 공개됐다. 값비싼 3D 라벨 데이터 없이도 일반 동영상에서 깊이와 움직임 정보를 추출해 사후 학습을 진행하며, 동적 장면을 3D 공간으로 복원한다. 전체 용량이 13.2GB로 가볍고 학습 스크립트도 함께 제공되어 로컬 환경에서 직접 실행해볼 수 있다.
텍스트로 인체 동작을 생성하는 오픈소스 모델 MotionSpaceFlow가 공개됐다. 모델 크기는 약 1.1GB로 일반 GPU에서 구동할 수 있다. 가장 주목할 점은 추가 학습 없이도 특정 프레임의 관절 위치를 고정하면 AI가 이에 맞춰 전체 동작을 완성한다는 것이다.
푸단대학교와 텐센트 훈위안, 저장대학교 연구진이 네이티브 2K 해상도를 지원하는 비디오·오디오 동시 생성 프레임워크 'Prism'을 오픈소스로 공개했습니다. 동적 희소 어텐션을 통해 소리가 발생하는 영역과 움직임이 빠른 부분에 연산력을 집중시켜 훈련 속도를 2.5배 높였습니다. 현재 허깅페이스에서 프리뷰 가중치와 코드가 제공됩니다.
바이트댄스가 빠른 시각 생성을 위한 적대적 증류 기법 'DMAD'를 발표했다. 분포 매칭 방식을 활용해 기존에 20~30스텝이 걸리던 MiniMax-H3 등의 영상 디퓨전 과정을 단 4스텝으로 줄여, 품질 저하 없이 생성 속도를 크게 끌어올렸다.