Skywork 開源 Matrix Game 4.0：單卡 83 幀即時渲染可玩 3D 遊戲

Skywork 的 Matrix Game 4.0 是一個能即時生成可互動 3D 遊戲畫面的開源 AI 世界模型。它把傳統遊戲引擎和神經網路結合起來，讓你用單張消費級顯示卡就能玩上每秒最高 83 幀的 AI 渲染遊戲。

過去的 AI 遊戲模型往往試圖端到端生成所有畫素，玩家玩上幾秒鐘，畫面就會開始扭曲變形、場景漂移甚至物理規律崩塌。Matrix Game 4.0 換了一條聰明的路子：它不讓 AI 去猜物理碰撞和按鍵規則，而是保留一個底層可執行遊戲引擎，專門負責跑物理碰撞、角色移動和按鍵互動，輸出粗略的低模畫面。AI 只負責把這層低模畫面即時重繪成細節豐富的高畫質影像，HUD 介面和音效則作為獨立圖層貼在最外層。

它能做什麼

Matrix Game 4.0 首發開放了三個針對特定場景微調的渲染檢查點：中世紀城堡、古埃及和城市賽車。每個場景模型大約有 50 億引數（5001016512 個 BF16 引數）。

系統輸出解析度為 480x864。它提供了兩種執行預設：如果追求極致流暢，可以開啟即時預設，採用 TAEHV 編解碼器配合單步降噪，在最佳化後的 DiT 和 CUDA graphs 加持下，單張消費級 GPU 就能跑出最高 83 幀的流暢畫面；如果追求畫質，則能切換到 Wan VAE 兩步降噪的高質量預設。

更有意思的是它內建了一個程式設計智慧體。你不需要自己去扒引擎底層寫邏輯，直接用自然語言描述想加什麼新玩法，智慧體就會自動去修改對應的遊戲程式碼。

怎麼獲取與當前限制

專案已經在 Hugging Face 和開源平臺公開了程式碼、模型權重與演示資源，遵循 Apache-2.0 許可證，底層的 TAEHV 編解碼器遵循 MIT 協議。需要說明的是，這次開源放出了推理原始碼、場景權重與依賴清單，但並未包含原始訓練程式碼和訓練資料集。

雖然宣稱支援消費級顯示卡，但上手前也有幾點限制需要看清。首先，這些模型是高度專精於自帶的特定場景與攝像機軌跡的，遇到從未見過的複雜幾何體、鏡頭劇烈晃動或者極長時間的遊玩，依然可能出現外觀漂移或幾何形變。其次，AI 重繪的畫面哪怕再逼真，也不會反過來改變底層的碰撞判定和物理法則。官方也沒有保證任何一張普通顯示卡都能無腦跑滿視訊記憶體。

想要嘗試的開發者可以直接去 Hugging Face 搜尋 Skywork/Matrix-Game-4.0，按照倉庫內的 manifest 指令碼下載模型權重與對應場景的引擎資產。

為什麼重要

我們認為，Matrix Game 4.0 最大的意義在於給 AI 遊戲世界模型指了一條務實的落地路徑。過去業內總執著於用純神經模型端到端模擬整套物理引擎，結果不僅算力開銷巨大，畫面的時空一致性也極其脆弱；Skywork 選擇讓傳統引擎守住物理和玩法的下限，只讓 AI 去做最擅長的神經著色，既保住了可玩性，又把幀率拉到了可實用的 83 幀。

對獨立開發者和圖形學玩家來說，它非常值得現在就拉下來本地跑一跑。它可能還不足以支撐一部商業 3A 大作的完整管線，但對於探索下一代神經即時渲染引擎、低成本資產高畫質化或者 AI 輔助玩法迭代來說，這是一個目前少有的、程式碼權重全部開放且真正跑得起來的現成樣本。