跳到正文
IFAI

開源專案

InSpatio-World 1.5:一張圖加運鏡軌跡,生成 4D 漫遊影片

首次發布 傳播指數 59

InSpatio 開源 4D 世界模型 InSpatio-World 1.5。它支援輸入單張圖片、全景圖或影片,通過預測新視角沿著指定鏡頭軌跡生成漫遊畫面,還能保留動作並製作「子彈時間」效果。模型體積不到 6GB,大多數消費級顯示卡即可執行。

InSpatio-World 1.5:一張圖加運鏡軌跡,生成 4D 漫遊影片
圖:inspatio.com

InSpatio-World 1.5 是一個能把靜態圖片或現有影片變成可互動 4D 漫遊空間的開源世界模型。你只需要給它一張圖和一條指定的攝像機運鏡軌跡,它就能沿著這條路徑生成一段帶空間縱深的新影片。

相比上一代,1.5 版本最大的變化是不再侷限於影片輸入,而是全面放寬了素材限制。只要你想在已有畫面裡自由穿梭、推拉搖移,它就能當成一個低成本的虛擬運鏡引擎來用。

它能做什麼

你可以把 InSpatio-World 1.5 理解為一個懂三維空間的智慧相機。

輸入一張單圖,它能從原始畫框裡走出去,推斷畫面盲區裡的空間和細節,生成連貫的場景漫遊影片,而且風格和空間結構不會走樣。

如果輸入多張同步拍攝的照片,你可以指定圍繞主體的環繞軌跡,直接做出一套流暢的「子彈時間」畫面。

如果輸入全景圖,它能在更廣闊的環境裡生成大範圍的推軌鏡頭。如果輸入已有影片,它不僅能在三維空間裡變視角,還能保留原影片裡的動態動作,甚至允許你隨時定格畫面做時空停滯效果。

這些效果依靠的是新視角預測機制。模型從現有的一到兩張畫面裡理解場景的三維結構,然後推算在新的位置和視角下世界會長成什麼樣,並在鏡頭大範圍晃動時鎖住物體身份和光影細節。

硬體要求與上手門檻

對個人創作者和獨立開發者來說,這個模型最大的吸引力在於輕量。

它基於 Wan 2.1 的 1.3B 底座構建,整個模型體積不到 6GB。這意味著你不需要動用專業算力卡,大部分普通的消費級顯示卡就能塞下並直接跑起來。

根據官方此前公開的 1.0 版本基準,其 1.3B 模型在 WorldScore-Dynamic 即時評測中排名第一,單張 GPU 能跑到 24 FPS。雖然 1.5 版的正式基準還沒有單獨公佈,但底座同樣延續了低延遲和輕量化的設計思路。

目前 InSpatio-World 1.5 的程式碼已經開源在專案主頁和 GitHub 上,頁面底部附有完整的環境配置、模型下載和執行指南,你可以直接克隆倉庫本地部署。

為什麼重要

我們認為 InSpatio-World 1.5 走了一條非常務實的路線。現在的影片生成模型都在卷提示詞生影片,但對真正的影視創作者或分鏡師來說,最大的痛點不是畫不出東西,而是攝像機根本不聽使喚。

通過把控制權完全交給運鏡軌跡,它讓分鏡預演、概念設計和定格特效的製作門檻大幅降低。做獨立動畫或者短片的創作者,現在可以用一張概念圖直接測試多種運鏡走位,而不用每次重新抽卡。

當然,它也有現實侷限。模型是在用演算法腦補原圖拍不到的地方,如果鏡頭移動幅度過大,盲區裡的紋理依然可能出現 AI 常見的形變或模糊。但就憑不到 6GB 的體積和消費級顯示卡可跑的低門檻,任何想做分鏡預演或空間影片實驗的人,現在都值得把它下載下來試一試。

來源 (3)

  1. [1]
    inspatio.com(在新分頁開啟)原文inspatio.com
  2. [2]
    inspatio.github.io(在新分頁開啟)報導inspatio.github.io
  3. [3]
    youtube.com(在新分頁開啟)報導youtube.com

每日 AI 內容精選