칭화대, 음성 추출 모델 Falcon 오픈소스 공개: 입모양 추적해 특정 목소리만 분리
칭화대 연구진이 화자 분리 모델 Falcon을 오픈소스로 공개했다. 카메라로 입 모양을 추적해 시끄러운 환경에서도 목표 인물의 음성만 실시간 추출하며, 학습 파라미터는 50만 개에 불과하다. 함께 제공되는 Falcon Studio를 통해 노트북에서 로컬 구동하고 Zoom이나 텐센트 회의에 바로 연결할 수 있다.
칭화대 연구진이 화자 분리 모델 Falcon을 오픈소스로 공개했다. 카메라로 입 모양을 추적해 시끄러운 환경에서도 목표 인물의 음성만 실시간 추출하며, 학습 파라미터는 50만 개에 불과하다. 함께 제공되는 Falcon Studio를 통해 노트북에서 로컬 구동하고 Zoom이나 텐센트 회의에 바로 연결할 수 있다.