跳到正文
IFAI

AIGC

Luma 推出 Dream Machine 指令修改功能:打字就能給影片換裝換場景

首次發布 傳播指數 40

Luma Labs 在 Dream Machine 中上線 Modify with Instructions 功能,訂閱使用者直接用自然語言即可修改影片內容。只需在畫面中選定目標並輸入修改提示詞,就能在整段影片中實現物體替換、換裝或虛擬佈景,並支援三檔強度微調。目前已向全部訂閱使用者開放。

Luma 推出 Dream Machine 指令修改功能:打字就能給影片換裝換場景
圖:lumalabs.ai

拍完一段影片才發現演員衣服顏色不對,或者桌上多了一隻煞風景的咖啡杯,以前要麼重新開機,要麼老老實實進剪輯軟體一幀一幀扣。生成式 AI 剛火的時候更慘,想改一個細節,只能重新打提示詞抽盲盒,原有的構圖和動作全得推倒重來。

Luma Labs 在旗下的影片生成工具 Dream Machine 中上線了 Modify with Instructions 功能。所有付費訂閱使用者現在可以直接用自然語言打字,在已有的影片裡改物體、換衣服甚至重搭背景。

選定一幀,打字就能改全片

這項功能的操作並不複雜。你只需要在影片裡選出關鍵的一幀,確保想修改的目標清晰可見,然後像平常聊天一樣輸入指令就行。

比如你可以輸入「把紅裙子換成藍西裝」,或者「把咖啡杯換成紅酒杯」。Dream Machine 會先理解你的意圖,再把這個改動連貫地應用到整段影片剪輯裡,不需要手動去畫繁瑣的遮罩。

在應用場景上,Luma 列得很細。做特效可以用來移除穿幫物體、擴充套件虛擬場景、切換雨雪天氣;做廣告可以做虛擬產品植入、替換食品原料;在影視和設計裡,也能隨時完成虛擬換裝、材質微調或色彩修改。

三檔強度滑塊,但也有使用限制

為了平衡修改幅度,Luma 提供了強度調節滑塊,分為 Adhere、Flex 和 Reimagine 三檔。調低強度會盡量保留原始畫面的細節,拉高強度則給 AI 更多天馬行空的重構空間。

不過,這項早期功能也有明確的限制。首先,為了確保系統能準確鎖定修改目標,你想改的東西必須在影片的第一幀就露臉,否則修改很容易失靈。

另外就是畫面比例。系統目前只支援 9:16、3:4、1:1、4:3、16:9 和 21:9 這六種預設規格。如果上傳了非常規比例的影片,Dream Machine 會強行裁切和轉碼,這可能會導致畫面邊緣變形或質量下降。

為什麼重要

對獨立創作者、廣告製作人和特效剪輯師來說,這項功能最大的意義在於大幅降低了試錯成本。以前在 AI 影片裡改一個道具基本等於重做,現在終於有了定向微調的控制權,值得經常做影片概念驗證的人現在就去試一試。

從行業來看,AI 影片的競爭重點已經從最初拼畫質、拼時長的「純生成階段」,轉向了拼可控性的「編輯與工作流階段」。誰能讓專業創作者精準控制畫面的每一個畫素,誰才能真正切入影視和廣告的工業化流程。Luma 繞過複雜的圖層繪製、直接用自然語言來驅動區域性重繪,顯然會逼著 Runway 和 Pika 等對手加快跟進類似的原生編輯工具。

我們認為,Luma 這一步切中要害,把後期最頭疼的改方案做成了幾行字的事。但「修改目標必須出現在第一幀」的門檻,也暴露出底層演算法在長時序追蹤和上下文理解上還有欠缺。它現在更像是一個敏捷的初級後期助手,要想徹底取代專業視效流程,還得等後續的逐幀精細控制進一步迭代。

來源 (1)

  1. [1]
    lumalabs.ai(在新分頁開啟)原文lumalabs.ai

每日 AI 內容精選