清華開源音影片提取模型 Falcon:看嘴型抽離人聲,直連騰訊會議
清華團隊開源目標說話人提取模型 Falcon。它將攝像頭畫面與麥克風聲音對應,靠追蹤嘴部在嘈雜環境中即時提取指定人物語音,可訓練引數僅 50 萬。配套的 Falcon Studio 支援在筆記本本地執行,並能通過虛擬音訊裝置直連騰訊會議或 Zoom。
清華團隊開源目標說話人提取模型 Falcon。它將攝像頭畫面與麥克風聲音對應,靠追蹤嘴部在嘈雜環境中即時提取指定人物語音,可訓練引數僅 50 萬。配套的 Falcon Studio 支援在筆記本本地執行,並能通過虛擬音訊裝置直連騰訊會議或 Zoom。