LeapTalk 實現單步生成:數字人口播達 200 FPS,徹底解決漂移
研究團隊提出數字人生成框架 LeapTalk。它摒棄了多步擴散和自迴歸方案,採用基於布朗橋的單步異構蒸餾,只靠一張參考圖和一段音訊,就能以最高 200 FPS 的超快速度單步生成口型同步的流式長影片,同時保證長時間不發生面部身份漂移。
研究團隊提出數字人生成框架 LeapTalk。它摒棄了多步擴散和自迴歸方案,採用基於布朗橋的單步異構蒸餾,只靠一張參考圖和一段音訊,就能以最高 200 FPS 的超快速度單步生成口型同步的流式長影片,同時保證長時間不發生面部身份漂移。