LeapTalk 实现单步生成:数字人口播达 200 FPS,彻底解决漂移
研究团队提出数字人生成框架 LeapTalk。它摒弃了多步扩散和自回归方案,采用基于布朗桥的单步异构蒸馏,只靠一张参考图和一段音频,就能以最高 200 FPS 的超快速度单步生成口型同步的流式长视频,同时保证长时间不发生面部身份漂移。
研究团队提出数字人生成框架 LeapTalk。它摒弃了多步扩散和自回归方案,采用基于布朗桥的单步异构蒸馏,只靠一张参考图和一段音频,就能以最高 200 FPS 的超快速度单步生成口型同步的流式长视频,同时保证长时间不发生面部身份漂移。