跳到正文
IFAI

AIGC

PixVerse 釋出即時世界模型 R1:邊播邊改提示詞,生成連續影片流

首次發布 傳播指數 41

PixVerse 釋出即時世界模型 PixVerse R1,能以流式生成連續 1080P 影片,使用者中途隨時輸入提示詞即可即時改變畫面。雖然目前一致性較弱、物體易變形,但它讓 AI 影片從等渲染的切片變成了可即時干預的模擬世界。

PixVerse 釋出即時世界模型 R1:邊播邊改提示詞,生成連續影片流
圖:pixverse.ai

過去用 AI 生成影片,體驗其實很像在網咖排隊洗照片:敲下一段提示詞,點下生成,然後盯著進度條等上一兩分鐘,最後拿到一段五秒或十秒的短切片。如果不合心意,就得改改詞重新來過。

PixVerse 拿出的 PixVerse R1 換了一種完全不同的思路。它不再是一次性吐出一個固定時長的影片切片,而是像遊戲引擎一樣,直接以流式即時輸出連續的 1080P 畫面。

更關鍵的是,你在看它生成的時候,隨時可以敲鍵盤插話。比如你正看著一條空曠的公路,突然輸入「來一輛紅車」,畫面裡就會真的開進一輛紅車;再輸入「遠處發生爆炸」,天際線接著就會騰起濃煙。

像打遊戲一樣即時改寫畫面

把影片生成做成即時的「世界模型」,最大的難點在於延遲和狀態記憶。

按照 PixVerse 官方的說法,R1 是一個端到端的原生多模態系統,把文本、影像、音訊和影片當成統一的 token 流來處理。為了跑出即時效能,他們把擴散取樣的步數從過去的幾十步壓縮到了 1 到 4 步,並且用自迴歸框架配合記憶增強注意力機制,試圖讓畫面能夠無休止地往下播。

不過,實際演示裡暴露出的問題也很明顯。

很多早期體驗者發現,現在的 R1 一致性還相當脆弱,世界記憶也不太穩定。鏡頭往前推著推著,原本的人物可能突然扭曲變形甚至直接消失,背景也會逐漸退化成某種讓人脊背發涼的「噩夢燃料」。

說白了,現在的它還很難用來製作嚴謹的故事片。但不少業內人士依然覺得眼前一亮,原因很簡單:這是它最差的階段,能在 1080P 下做到連續生成並允許人類即時插手干預,方向已經走通了。

為什麼重要

我們認為,PixVerse R1 的意義不在於現在的畫質有多完美,而在於它徹底捅破了 AI 影片的那層互動窗戶紙。

對普通創作者來說,它眼下更像一個極具啟發性的玩具,或者用來做即興互動直播的實驗工具。但對遊戲和互動娛樂行業來說,這代表了一種全新的可能性:未來的非玩家角色(NPC)和動態環境,可能不需要策劃提前寫好所有指令碼,而是靠模型根據玩家的行為即時演算生成。

從行業競爭來看,過去一年大家都在卷生成時長和電影感,比如把 5 秒拉長到 10 秒、把運鏡做得更順滑。PixVerse 這一步走得很聰明,它沒有在傳統的離線渲染賽道里繼續卷畫質,而是把戰線拉到了「即時互動世界模型」上,逼著同行去思考 AI 影片如何與遊戲引擎、即時模擬融合。

當然,隱患也擺在眼前。即時自迴歸生成最怕誤差累積,幾步之後畫面崩壞是目前這類模型的通病。如果後續在長時間一致性和物理規律理解上沒有突破,這種即時流就容易淪為只能看前幾秒的雜耍。但無論如何,當 AI 影片從等渲染的成品變成可以隨時被戳醒的活世界,玩法已經徹底變了。

來源 (1)

  1. [1]

每日 AI 內容精選