KAIST, 립포싱 공개: 2단계 확산으로 31 FPS 실시간 립싱크 구현
KAIST AI와 AIPARK가 비디오 간 립싱크를 위한 자기회귀 확산 모델 'Lip Forcing'을 발표했다. 14B 교사 모델을 2단계 디노이징 학생 모델로 증류해 1.3B 버전이 단일 H100에서 31 FPS를 기록하며 실시간 기준을 넘어섰다.
KAIST AI와 AIPARK가 비디오 간 립싱크를 위한 자기회귀 확산 모델 'Lip Forcing'을 발표했다. 14B 교사 모델을 2단계 디노이징 학생 모델로 증류해 1.3B 버전이 단일 H100에서 31 FPS를 기록하며 실시간 기준을 넘어섰다.