輝達釋出 Open H3 Regenerate 2K:3 步將 AI 影片重繪至 2K,最高支援 4K
輝達推出開源影片增強工具 Open H3 Regenerate 2K,可將 MiniMax H3 等模型生成的低解析度影片重繪至 2K,最高支援 4K 輸出。它僅需 3 步擴散即可補足畫面細節,支援最長 15 秒片段,相關程式碼與模型已全盤開源。不過重繪過程可能會輕微改變人臉等區域性細節。
輝達推出開源影片增強工具 Open H3 Regenerate 2K,可將 MiniMax H3 等模型生成的低解析度影片重繪至 2K,最高支援 4K 輸出。它僅需 3 步擴散即可補足畫面細節,支援最長 15 秒片段,相關程式碼與模型已全盤開源。不過重繪過程可能會輕微改變人臉等區域性細節。
本週,Underdog 在 Hugging Face 開源語音轉文字模型 Bark 3.0,體積僅 163 MB,在蘋果 M 系列晶片上轉寫 5 分鐘音訊僅需半秒。它的英文會議錯誤率明顯低於 Whisper Large,Clean 版本還能自動過濾掉口頭禪。不過目前僅支援英文。
輝達釋出互動式世界模型 SANA-WM,僅 26 億引數即可將單張影像轉化為可鍵盤漫遊的 720p 影片。其蒸餾版本在單張 RTX 5090 上僅需 34 秒即可生成 1 分鐘片段。官方表示權重即將開源。
輝達釋出並開源 3D 世界生成器 Lyra 2.0,能將單段影片轉為高一致性的 3D 高斯潑濺環境。模型體積僅 131MB,解決了長視距下的遺忘與漂移問題,生成的場景可直接匯入 Isaac Sim 供機器人做導航訓練。