타버스, 코딩 없이 대화형 AI 비디오 휴먼 만드는 'PAL 메이커' 공개
타버스는 코딩 없이 인터랙티브 AI 비디오 컴패니언을 제작할 수 있는 'PAL 메이커'를 출시했다. 사용자가 AI 에이전트에게 원하는 기능을 말하면 얼굴, 음성, 기억력, 안전장치를 자동으로 구성해 준다. 레이븐-1 등 자체 모델을 기반으로 구동되며, 아마존과 메이요 클리닉 등에서 채용 및 수술 후 환자 관리에 활용되고 있다.
타버스는 코딩 없이 인터랙티브 AI 비디오 컴패니언을 제작할 수 있는 'PAL 메이커'를 출시했다. 사용자가 AI 에이전트에게 원하는 기능을 말하면 얼굴, 음성, 기억력, 안전장치를 자동으로 구성해 준다. 레이븐-1 등 자체 모델을 기반으로 구동되며, 아마존과 메이요 클리닉 등에서 채용 및 수술 후 환자 관리에 활용되고 있다.
연구진이 실시간 토킹헤드 생성 프레임워크 LeapTalk를 공개했다. 다단계 확산 모델의 긴 지연 시간과 자기회귀 모델의 얼굴 변형 문제를 해결하기 위해 브라운 브리지 기반 1단계 이종 증류를 도입했으며, 사진 한 장과 음성만으로 최대 200 FPS 속도의 정밀한 립싱크 롱폼 영상을 실시간 생성한다.
미라지가 차세대 AI 아바타 모델 '아바타 X'를 공개했다. 단 10초짜리 영상으로 분신을 제작할 수 있으며, 하품이나 헛웃음 같은 미세 표정까지 사실적으로 재현한다. 오디오 기반의 전신 움직임 생성은 물론, 가로·세로 비율과 장시간 영상 품질 유지를 지원한다.
어도비와 존스홉킨스대 연구진이 실시간 비디오 세계 모델 '원더(Wonder)'를 발표했다. 이미지나 영상 한 편으로 16 FPS 실시간 탐색 환경을 생성하며 6자유도 카메라 이동을 지원한다. 새로운 구역을 둘러본 뒤 돌아와도 사물 위치가 1분 이상 일관되게 유지된다.
구글이 인물의 머리와 얼굴 구조를 슬라이더로 정밀하게 설계할 수 있는 3D 모델 'GNM'을 아파치 2.0 라이선스로 오픈소스 공개했습니다. 치아와 혀를 포함해 600개 이상의 제어 파라미터를 갖춰 기존 AI 생성 캐릭터의 얼굴 획일화와 구강 내부 묘사 결함을 해결합니다.
넷플릭스 산하 아이라인 랩스가 영상 변환 프레임워크 'ID-V2V'를 발표했다. 키프레임 한 장만 수정하면 인물의 얼굴, 시선, 표정을 그대로 유지하면서 영상 전체의 조명과 스타일을 바꿀 수 있다. 최대 720p 출력을 지원하며, 모델 크기가 약 80GB에 달해 고사양 하드웨어가 필요하다.
Black Forest Labs와 미믹 로보틱스는 멀티모달 파운데이션 모델 FLUX 3 기반의 비디오-행동 모델 'FLUX-mimic'을 공개하고 아우디 공장에 배치했다고 밝혔다. 비디오 예측으로 학습한 물리 법칙을 로봇 조작으로 변환하며, 단일 RTX 5090에서 80ms 이내로 동작해 케이블 등 유연 소재 조립도 수행한다.
블랙 포레스트 랩스가 멀티모달 파운데이션 모델 FLUX 3의 조기 액세스를 시작했다. Self-Flow 아키텍처를 기반으로 이미지, 비디오, 오디오를 통합 학습해 자체 사운드를 포함한 최대 20초 영상을 한 번에 생성하며, 로봇 행동 예측까지 지원한다. 향후 몇 주 안에 이미지 생성과 오픈 웨이트 Dev 버전도 순차 출시될 예정이다.
ABot-World는 사용자 조작에 실시간으로 반응하며 무한히 확장되는 가상 세계를 생성하는 오픈소스 시뮬레이터입니다. 단일 데스크톱 RTX 5090 환경에서 720p 해상도, 16 FPS, 1.2초 지연 시간으로 동작하며, 코드와 모델 가중치 전체가 Apache 2.0 라이선스로 공개되었습니다.
비디오 개인화 모델 Homie가 공개됐다. 여러 인물과 물체의 참조 이미지를 바탕으로 일관된 비디오를 생성하며, 다각도 이미지와 OCR 위치 맵을 지원해 텍스트와 디테일의 정확도를 높였다. 복잡한 디자인에서도 기존 모델 대비 오류가 적다.
영화 '디스트릭트 9'의 닐 블롬캠프 감독이 씨댄스 2.0(Seedance 2.0)으로 제작한 13분 분량의 AI 단편 'NIGHTBORNE'을 공개했다. 콘셉트 아티스트 및 실존 인물 32명의 얼굴·목소리가 활용됐다. 그는 장편 영화 제작에 나설 계획이며, AI 전담 스튜디오 '발리 스튜디오'도 설립했다.
크리스토퍼 놀란 감독은 인터뷰에서 AI를 누구나 위험을 알고 있는 '투명한 트로이 목마'에 비유했다. 그는 기술 발전 속도에 비해 대중, 특히 젊은 층이 생성형 AI에 강한 회의감과 경계심을 보이는 현상이 매우 건강한 반응이라고 평가했다.
browser-use의 browser-harness에 녹화 및 자동 편집 기능이 병합되었다. 에이전트가 브라우저 작업을 수행하면서 액션별 스크린샷과 로그를 남기고, 민감 정보 블러 처리 및 부드러운 줌 효과를 입혀 Screen Studio 스타일의 튜토리얼 영상을 외부 툴 없이 바로 생성한다.
런웨이가 단순 프롬프트를 풀 마케팅 기획서와 멀티 플랫폼 광고 소재로 변환하는 'Agent 2.0'을 출시했다. 메타나 유튜브의 성과 데이터를 분석해 다음 광고 테스트를 제안하며, Gen-4.5 등 여러 모델을 조합해 규격과 지역에 맞는 베리에이션을 자동 생성한다. 단순 영상 생성을 넘어 종합 마케팅 워크플로 자동화로 나아가는 행보다.
구글이 영상 제작 도구 구글 비즈에 제미나이 옴니 편집과 개인 AI 아바타 기능을 추가했다. 텍스트 명령어로 배경 교체나 조명 보정 등 단계별 수정이 가능하며, 셀카 한 장과 음성 녹음으로 카메라 없이 발언하는 아바타를 생성할 수 있다. 구글 AI 프로, 울트라 및 워크스페이스 비즈니스 구독자에게 제공되며 SynthID 워터마크가 적용된다.
실시간 대화 모델 Wan Streamer가 0.3 버전을 공개하며 상반신 대화를 넘어 환경과 상호작용하는 동작 제어를 지원한다. 비디오를 '세계'와 '이벤트 스트림'으로 분리해 자연어 지시에 맞춰 포즈와 표정을 실시간 생성한다. 현재는 기술 논문만 공개된 상태다.
넷플릭스가 2분기 실적 발표에서 올해 약 300편의 콘텐츠 제작 과정에 생성형 AI를 활용했다고 밝혔다. 테드 서랜도스 공동 CEO는 다큐멘터리 '아메리칸 익스페리먼트'의 17분 분량 AI 강화 영상을 절반의 비용과 두 배 빠른 속도로 제작했다고 소개했다. 넷플릭스는 AI가 창작자를 돕는 도구일 뿐 사람을 대체하려는 것은 아니라고 강조했다.
오픈MOSS가 실시간 스트리밍 영상 이해를 위한 11B 규모의 비전-언어 모델 'MOSS-VL-Realtime'을 공개했다. 전체 영상을 모두 읽은 뒤 답하는 기존 방식과 달리, 연속적인 프레임을 실시간 인식하며 언제든 사용자의 질문과 개입을 지원하고 정보 부족 시 침묵을 유지한다.
버라이어티에 따르면 '스타워즈' 제작자 조지 루카스가 영화 제작에서 AI 도입을 긍정적으로 평가했다. 그는 AI에 대한 반발을 초기 자동차 대신 마차를 고집하던 태도에 비유하며 기술 발전을 거스를 수 없다고 말했다. 할리우드 내에서 생성형 AI에 대한 경계심이 높은 가운데 거장의 발언이 주목받고 있다.
알리바바 Wan 팀이 음악에 맞춰 롱폼 댄스 비디오를 생성하는 'Wan-Dancer-14B'를 공개했다. 기존 방식처럼 참조 동작 영상이 필요 없이 음악과 이미지 한 장만으로 박자에 맞춘 분 단위 춤을 생성한다. 힙합, 클래식 무용 등 다양한 스타일에 대응한다.