본문으로 건너뛰기
IFAI

이미지·영상 생성

Captions, Mirage Studio 공개: 자체 옴니모달 모델로 웃고 랩하는 AI 배우 구현

게시 확산 지수 37

Captions 산하 Mirage가 Mirage Studio를 선보였습니다. 자체 옴니모달 파운데이션 모델을 기반으로 오디오 파일과 장면 설명, 참조 이미지를 입력하면 지시에 따라 웃고 찡그리고 노래하며 랩하는 생생한 AI 배우 영상을 몇 분 만에 제작할 수 있습니다. 현재 전원 이용 가능합니다.

Captions, Mirage Studio 공개: 자체 옴니모달 모델로 웃고 랩하는 AI 배우 구현
이미지: x.com

지금까지의 AI 비디오 아바타는 대부분 대본을 읽는 마네킹처럼 표정이 굳어 있는 경우가 많았습니다.

동영상 편집 플랫폼 Captions는 6월 2일, 자체 개발한 옴니모달 파운데이션 모델 기반의 새로운 제작 도구인 Mirage Studio를 선보였습니다.

웃고 랩하는 감정 표현형 AI 배우

사용 방식은 간단합니다. 사용자가 오디오를 업로드하고 장면을 설명하거나 참고 이미지를 넣으면 몇 분 만에 영상이 완성됩니다.

공식 설명에 따르면 이 AI 배우들은 단순히 입만 벙긋거리는 데 그치지 않고, 지시에 따라 웃거나 움찔하고, 노래나 랩까지 소화할 수 있을 정도로 생동감 넘치는 움직임을 구현합니다. 현재 mirage.app을 통해 누구나 이용할 수 있습니다.

왜 중요한가

마케터나 소규모 크리에이티브 팀에게 실제 배우 섭외 없이 감정이 실린 영상을 빠르게 만들어낼 수 있다는 점은 큰 매력입니다. 콘티 검증이나 숏폼 광고 소재를 대량으로 뽑아내야 하는 환경에서 유용하게 쓰일 수 있습니다.

다만 우리는 데모 영상의 화려함과 실무 결과물 사이에 늘 일정한 괴리가 존재해 왔다는 점에 주목합니다. 미세한 표정 변화와 신체 움직임이 복잡한 환경에서도 어색한 불쾌한 골짜기 없이 일관되게 유지될 수 있을지가 실질적인 성패를 가를 것입니다.

출처 (1)

  1. [1]
    @getcaptionsapp(새 탭에서 열림)원문x.com

토픽 추적Captions Mirage 제품 개발

이 토픽의 소식을 최신순으로 모았습니다.

  1. Captions, Mirage Studio 공개: 자체 옴니모달 모델로 웃고 랩하는 AI 배우 구현이 기사
  2. 캡션스, 가상 인간 기반 UGC 광고 생성 AI '미라지' 공개

매일 AI 콘텐츠 픽