阿里发布 StreamChar:单张 H100 实时流式生成全身数字人音视频
阿里团队公布数字人音视频生成框架 StreamChar,将长程编排与短窗口去噪解耦。它利用 LLM 与音视频联合 DiT 架构,配合记忆机制防止身份漂移与音画脱节,在单张 H100 上跑出实时流式生成。全身数字人离实时互动和虚拟主播更近了一步。
阿里团队公布数字人音视频生成框架 StreamChar,将长程编排与短窗口去噪解耦。它利用 LLM 与音视频联合 DiT 架构,配合记忆机制防止身份漂移与音画脱节,在单张 H100 上跑出实时流式生成。全身数字人离实时互动和虚拟主播更近了一步。