英伟达发布 Open H3 Regenerate 2K:3 步将 AI 视频重绘至 2K,最高支持 4K
英伟达推出开源视频增强工具 Open H3 Regenerate 2K,可将 MiniMax H3 等模型生成的低分辨率视频重绘至 2K,最高支持 4K 输出。它仅需 3 步扩散即可补足画面细节,支持最长 15 秒片段,相关代码与模型已全盘开源。不过重绘过程可能会轻微改变人脸等局部细节。
英伟达推出开源视频增强工具 Open H3 Regenerate 2K,可将 MiniMax H3 等模型生成的低分辨率视频重绘至 2K,最高支持 4K 输出。它仅需 3 步扩散即可补足画面细节,支持最长 15 秒片段,相关代码与模型已全盘开源。不过重绘过程可能会轻微改变人脸等局部细节。
本周,Underdog 在 Hugging Face 开源语音转文字模型 Bark 3.0,体积仅 163 MB,在苹果 M 系列芯片上转写 5 分钟音频仅需半秒。它的英文会议错误率明显低于 Whisper Large,Clean 版本还能自动过滤掉口头禅。不过目前仅支持英文。
英伟达发布交互式世界模型 SANA-WM,仅 26 亿参数即可将单张图像转化为可键盘漫游的 720p 视频。其蒸馏版本在单张 RTX 5090 上仅需 34 秒即可生成 1 分钟片段。官方表示权重即将开源。
英伟达发布并开源 3D 世界生成器 Lyra 2.0,能将单段视频转为高一致性的 3D 高斯泼溅环境。模型体积仅 131MB,解决了长视距下的遗忘与漂移问题,生成的场景可直接导入 Isaac Sim 供机器人做导航训练。