跳到正文
IFAI

AI工具

NVIDIA 升級 ComfyUI:簡化介面免連線,4K 超分提速 30 倍

首次發布 傳播指數 41

本週在 GDC 上,NVIDIA 宣佈為 ComfyUI 推出全新 App View 模式,並上線 RTX 影片超解析度節點。使用者無需連線即可輸入提示詞生成影片;藉助 RTX 50 系列顯示卡的 NVFP4 格式與超分技術,4K 放大提速 30 倍,視訊記憶體佔用降低 60%。

圖:blogs.nvidia.com

想要在本地用 AI 生成影片,創作者通常要撞上兩堵高牆:一堵是 ComfyUI 密密麻麻像蜘蛛網一樣的節點連線圖,另一堵則是顯示卡視訊記憶體報警與動輒數分鐘的漫長渲染。

本週在舊金山舉辦的 GDC 大會上,NVIDIA 聯合 ComfyUI 推出了一整套最佳化方案,試圖把這道門檻徹底抹平。

告別連線地獄:ComfyUI 迎來傻瓜模式

對於很多想要嘗試本地 AI 繪圖和影片製作的創作者來說,節點式介面的學習曲線實在太陡峭了。

這次更新最直觀的改變,是 ComfyUI 上線了全新的 App View 模式。使用者不再需要看那些讓人眼花繚亂的連線,只要輸入提示詞、調整幾個基礎滑塊引數,點選生成即可。原本複雜的底層邏輯被完全封裝在幕後。

如果你後續需要精細調整工作流,也可以隨時無縫切回傳統的 Node View 節點檢視。這既保住了老玩家的自由度,又給新手開闢了一條捷徑。

與此同時,得益於底層最佳化,ComfyUI 在 RTX GPU 上的執行速度自去年 9 月以來已經累計提升了 40%,並且現在正式原生支援 NVFP4 與 FP8 兩種精度格式。

視訊記憶體暴降六成,4K 放大提速 30 倍

除了介面做減法,底層效能也迎來了真金白銀的提升。

在模型支援方面,FLUX.2 Klein 的 4B 和 9B 版本的 NVFP4 與 FP8 權重已經在 Hugging Face 上架,下載後可以直接載入 ComfyUI 的預設模板使用。開源影片模型 LTX-2.3 的 NVFP4 支援也即將推出。

在 GeForce RTX 50 系列顯示卡上,NVFP4 格式可以帶來 2.5 倍的效能提升,同時將視訊記憶體佔用直接削減 60%。如果使用相容性更廣的 FP8 格式,效能也能提升 1.7 倍,視訊記憶體減少 40%。這意味著許多原本只能在雲端或頂級工作站上執行的高畫質模型,現在普通的桌面顯示卡就能跑得動。

另一個長期困擾影片創作者的瓶頸是超解析度放大。以前在本地用傳統放大器把一段 10 秒的影片預覽拉伸到 4K,通常需要等待數分鐘之久。

針對這個痛點,NVIDIA 將自家的 RTX 影片超解析度技術做成了 ComfyUI 的獨立節點,同時以 Python Wheel 形式釋出到 PyPI 供開發者呼叫。它直接呼叫 RTX 顯示卡的 Tensor Core 硬體核心,把 4K 放大的速度提升了整整 30 倍,視訊記憶體開銷也大幅縮減。

在周邊生態上,NVIDIA 還同步展示了在本地執行的開源影片編輯器 LTX Desktop,能跨裝置遠端呼叫算力的 LM Link,以及將在 3 月 31 日推送給 RTX 50 系列測試版使用者的 DLSS 4.5 六倍多幀生成技術。

為什麼重要

對於獨立遊戲開發者、數字藝術家和影片剪輯師來說,這套組合拳非常值得立刻跟進。它把原來需要專業工程能力才能駕馭的本地影片管線,壓縮成了一個輕量級的桌面工具。先用 App View 快速跑概念分鏡,再用極速的 RTX VSR 拉到 4K 交付,極大縮短了本地出片的試錯週期。

我們認為,NVIDIA 這一步棋走得非常老道。它表面上是在給開源創作者送福利,實際上是在給自家的 RTX 50 系列硬體構築更深的技術護城河。通過把專有的 NVFP4 格式與 FLUX.2、LTX 等頭部開源模型深度捆綁,NVIDIA 正在把原本打算租用雲端算力的專業使用者,牢牢拉回自己的硬體生態裡。

不過對於普通使用者而言,這項福利並非完全人人平等。NVFP4 最驚豔的 2.5 倍速度與 60% 視訊記憶體節省,本質上是 RTX 50 系列獨佔的紅利,RTX 40 或更早架構的使用者只能享受到相對溫和的 FP8 最佳化。另外,RTX VSR 屬於偏向工程實現的快速超分演算法,面對擴散模型生成的高頻複雜細節時,畫面保真度能否完全替代耗時更長的高階級聯擴散模型,還需要創作者在實際複雜場景中檢驗。

總體看起來,本地生成式 AI 正在走出極客連線的草莽階段,向著低門檻、低視訊記憶體佔用的工業化桌面軟體穩步邁進。

來源 (1)

  1. [1]
    blogs.nvidia.com(在新分頁開啟)原文blogs.nvidia.com

每日 AI 內容精選