엔비디아, 음성 기반 3D 표정 생성 AI '오디오투페이스' 오픈소스화
엔비디아가 음성 데이터로 실시간 3D 표정 및 립싱크를 생성하는 'Audio2Face' 모델과 SDK, 학습 프레임워크를 전격 오픈소스로 공개했다. 음소와 억양을 분석해 자연스러운 표정 데이터를 매핑하며, 게임 개발사와 크리에이터가 맞춤형 디지털 휴먼을 더 손쉽게 제작할 수 있게 됐다.
엔비디아가 음성 데이터로 실시간 3D 표정 및 립싱크를 생성하는 'Audio2Face' 모델과 SDK, 학습 프레임워크를 전격 오픈소스로 공개했다. 음소와 억양을 분석해 자연스러운 표정 데이터를 매핑하며, 게임 개발사와 크리에이터가 맞춤형 디지털 휴먼을 더 손쉽게 제작할 수 있게 됐다.