Luma 推出 Ray3 Modify:用首尾幀生成過渡影片,還能保留真人演技
Luma 釋出影片模型 Ray3 Modify,已上線 Dream Machine 平臺。它支援輸入首尾兩幀來生成中間的過渡鏡頭,還能在替換角色外觀的同時,保留原素材中演員的動作、眼神與情緒。創作者無需重新實拍,就能用 AI 隨意更換佈景與服裝。
做影片後期的人最怕兩件事:一是演員演得好好的,甲方突然說服裝不對或者背景要換;二是鏡頭拍短了,轉場接不上,只能硬切。
以前遇到這種情況,要麼拉著劇組重拍,要麼把鏡頭丟進 AI 裡撞大運,結果往往是連演員的表情和眼神都被洗掉了。
由 a16z 支援的影片與 3D 生成公司 Luma 正式釋出了新模型 Ray3 Modify。這個模型的核心賣點就一個:在大幅修改畫面的同時,把真人演員的演技給完整留下來。
換掉衣服和臉,但眼神和節奏還在
傳統的影片生成模型表現力很強,但最大的痛點是不可控。只要你敢讓 AI 重畫,演員臉上的微表情、視線和動作節奏大機率就變形了。
Luma 稱 Ray3 Modify 解決了保留真人表演的難題。創意團隊只要給一段實拍素材,再加上一張角色參考圖,模型就能把原片裡的真人替換成目標角色。
更關鍵的是,演員原有的肢體動作、表演節奏、眼神方向以及情緒傳達都會被完整保留。跨鏡頭的服裝細節、角色長相和身份特徵也能保持一致。
按照 Luma 聯合創始人兼 CEO Amit Jain 的說法,創作者現在可以用相機先拍下真人表演,然後直接用 AI 把他們搬到任何想像中的場景、換上新衣服,甚至完成補拍,而不需要真正拉劇組返工。
定好頭尾兩幀,轉場不再靠猜
除了換人和換裝,Ray3 Modify 還給創作者加了一個很實用的功能:首尾幀過渡生成。
創作者只需要提供畫面的起始幀和結束幀,模型就會根據兩張圖自動生成中間的過渡鏡頭。
這對於導演把控轉場鏡頭、微調人物走位,以及確保不同分鏡之間的連貫性來說非常實用,不用再為了兩秒鐘的銜接畫面不斷碰運氣抽卡。
目前這個新模型已經在 Luma 的 Dream Machine 平臺上向用戶開放。Luma 曾在 2025 年 6 月首次推出影片修改功能,一直在和 Runway、Kling 等對手較勁。
技術的背後也是大筆資金的注入。就在 11 月,Luma 剛公佈了一輪 9 億美元的新融資,由沙特公共投資基金旗下的 AI 公司 Humain 領投,a16z、Amplify Partners 和 Matrix Partners 繼續跟投。他們還打算和 Humain 一起在沙特建一個 2GW 的 AI 超級計算叢集。
為什麼重要
我們認為,Ray3 Modify 代表了生成式影片賽道一個非常清晰的轉向:從「純憑空生成」轉向「接入傳統工業流水線」。
對於中小製作團隊、獨立導演或品牌廣告團隊來說,這個功能極具實用價值。大家不再需要為了改個方案把演員和場地重新租一遍,先用低成本實拍定下表演和情緒,剩下的全交給 AI 調色、換景、換衣服,創作試錯成本會斷崖式下跌。
在行業競爭上,Runway 和 Kling 都在搶專業創作者的桌面。純文本生成影片的玩具屬性太強,只有把動作、視線、首尾幀這種精確到畫素級的控制權還給導演,專業影棚才可能真正把它當成生產工具。Luma 這次切中痛點,會逼著其他對手在可控編輯上更快交卷。
但從目前來看,這種做法也有隱患。雖然它保留了演員的表演,但當真人神態被套上虛擬面孔或虛擬服裝後,如何界定演員本人的肖像與表演版權,很快會成為影視行業要面對的新麻煩。不過單從工具本身來看,把實拍表演與 AI 渲染深度繫結的路線,走得相當聰明。
來源 (1)
- techcrunch.com(在新分頁開啟)原文techcrunch.com