바이트댄스, 커머스 영상 특화 생성 AI '옴니쇼' 공개…이미지·음성·포즈 동시 제어
바이트댄스와 홍콩중문대 연구진은 인물-사물 상호작용에 특화된 동영상 생성 모델 '옴니쇼(OmniShow)'를 발표했다. 인물과 상품 이미지, 음성, 포즈 스켈레톤을 동시에 입력받아 립싱크와 손동작이 일치하는 최장 10초 길이의 커머스 영상을 생성한다. 현재 깃허브에서 코드 내부 검토 중이며 향후 오픈소스로 공개될 예정이다.
바이트댄스와 홍콩중문대 연구진은 인물-사물 상호작용에 특화된 동영상 생성 모델 '옴니쇼(OmniShow)'를 발표했다. 인물과 상품 이미지, 음성, 포즈 스켈레톤을 동시에 입력받아 립싱크와 손동작이 일치하는 최장 10초 길이의 커머스 영상을 생성한다. 현재 깃허브에서 코드 내부 검토 중이며 향후 오픈소스로 공개될 예정이다.