AI 비디오 물리 왜곡 잡는 '비디오잼' 프레임워크 공개
연구진이 비디오 생성 AI의 동작 및 물리 법칙 오류를 줄여주는 프레임워크 '비디오잼(VideoJAM)'을 발표했다. 외형과 모션을 결합한 표현을 학습하고 추론 시 자체 모션 예측을 가이던스로 활용해 일관성을 크게 높였다. 기존 모델에 바로 적용할 수 있으며 복잡한 움직임 생성에서 소라(Sora) 등을 앞섰다.
연구진이 비디오 생성 AI의 동작 및 물리 법칙 오류를 줄여주는 프레임워크 '비디오잼(VideoJAM)'을 발표했다. 외형과 모션을 결합한 표현을 학습하고 추론 시 자체 모션 예측을 가이던스로 활용해 일관성을 크게 높였다. 기존 모델에 바로 적용할 수 있으며 복잡한 움직임 생성에서 소라(Sora) 등을 앞섰다.