Viggle 釋出 Meridian:已有影片能換運鏡,還能做「子彈時間」
Viggle AI 釋出影片重構模型 Meridian。只要輸入一段現有影片或單張照片,它就能重建 3D 場景並按自定義軌跡重新運鏡,甚至凍結畫面做出「子彈時間」效果。模型基於 MiniMax-H3 構建,目前已開源 LoRA 權重並支援 ComfyUI。

Meridian 是 Viggle AI 推出的一個幾何引導影片工具,能幫你拿現成的實拍影片或單張照片,重新生成一段完全不同運鏡軌跡和時間節奏的新鏡頭。你可以讓攝像機繞著主體環繞旋轉、橫向平移,或者在動作正激烈時把畫面完全定格,做出《駭客帝國》那樣的「子彈時間」效果。
它能做什麼
只要輸入一段 24 fps 的連續影片或者一張單幀圖片,你就能在三維空間裡自由規劃新的攝像機路徑。
比如給一段攀巖或打籃球的實拍片段,你可以指定鏡頭先正常推進,然後在起跳瞬間定格畫面並旋轉視角,最後再恢復播放。
模型輸出規格固定在 24 fps,畫面比例匹配 768 畫布(16:9 比例下為 1344 × 768),支援生成 73 幀到 243 幀的內容,相當於 3 到 10 秒的一個鏡頭。
怎麼做到的
Meridian 並不是直接憑空腦補鏡頭,而是走了一條「幾何重建加擴散補全」的路線。
第一步,它利用一套叫 VGGT-Omega 的幾何系統估計原始影片的深度和相機姿態,把選中的幀變成帶顏色的 3D 點雲。
第二步,系統根據你畫好的新運鏡軌跡,快速把點雲投影成粗糙的參考影片,沒有畫面資訊的地方先留灰。在這一步你可以直接在瀏覽器裡實時預覽運鏡,不滿意隨時改。
第三步,它把原影片和這個帶灰洞的幾何參考畫面一起餵給 MiniMax-H3 模型,由模型補全缺失的畫面細節並最佳化光影。
為了不改動底座,Viggle 把它做成了兩個 LoRA 介面卡,各佔 2.5 GiB,一個是負責讀懂幾何渲染的 teacher,另一個是蒸餾後的 turbo,只需 4 步取樣就能出圖。
怎麼跑起來
想在本地跑 Meridian,硬體門檻並不低。
底座 MiniMax-H3 大約佔 61.7 GiB 視訊記憶體,加上兩個 LoRA 和 VGGT-Omega,官方參考實現需要一張高視訊記憶體的大算力 GPU。目前指令碼還不支援量化和 CPU 記憶體解除安裝,不過官方鼓勵社群往 RTX 4090 這樣的消費級顯示卡上做移植。
專案已經在 Hugging Face 上開源了程式碼、LoRA 權重和執行資產。
你可以用命令列指令碼直接推理,也可以啟動自帶的本地 Studio 網頁原型做多關鍵幀調鏡。喜歡節點流的話,官方還直接提供了 ComfyUI 的自定義節點和兩套完整工作流,拖進畫布就能用。需要注意的是,VGGT-Omega 帶有非商用限制,需要單獨獲取。
為什麼重要
對於獨立創作者和特效師來說,Meridian 相當於給實拍素材開了一顆後期後悔藥。以前需要昂貴多機位陣列才能拍出來的子彈時間和複雜環繞鏡頭,現在單機位拍完就能後期重構。
和以往靠文生影片硬猜運鏡的工具相比,它用幾何點雲做硬約束,鏡頭運動不僅精準可控,主體結構也不會亂晃崩潰。
我們認為,雖然目前 60 多 GB 的視訊記憶體門檻把普通玩家擋在了門外,但它的架構思路非常聰明,沒有重訓大模型,而是靠 LoRA 和幾何引導盤活了現成基座。只要社群完成 4-bit 量化或單卡解除安裝,這套方案很快就會成為影片二創和動態特效的常用管線。
來源 (2)
- huggingface.co(在新分頁開啟)原文huggingface.co
- youtube.com(在新分頁開啟)報導youtube.com