跳到正文
IFAI

AIGC

Luma 推出 Dream Machine 指令修改功能:打字就能给视频换装换场景

首次发布 传播指数 40

Luma Labs 在 Dream Machine 中上线 Modify with Instructions 功能,订阅用户直接用自然语言即可修改视频内容。只需在画面中选定目标并输入修改提示词,就能在整段视频中实现物体替换、换装或虚拟布景,并支持三档强度微调。目前已向全部订阅用户开放。

Luma 推出 Dream Machine 指令修改功能:打字就能给视频换装换场景
图:lumalabs.ai

拍完一段视频才发现演员衣服颜色不对,或者桌上多了一只煞风景的咖啡杯,以前要么重新开机,要么老老实实进剪辑软件一帧一帧扣。生成式 AI 刚火的时候更惨,想改一个细节,只能重新打提示词抽盲盒,原有的构图和动作全得推倒重来。

Luma Labs 在旗下的视频生成工具 Dream Machine 中上线了 Modify with Instructions 功能。所有付费订阅用户现在可以直接用自然语言打字,在已有的视频里改物体、换衣服甚至重搭背景。

选定一帧,打字就能改全片

这项功能的操作并不复杂。你只需要在视频里选出关键的一帧,确保想修改的目标清晰可见,然后像平常聊天一样输入指令就行。

比如你可以输入「把红裙子换成蓝西装」,或者「把咖啡杯换成红酒杯」。Dream Machine 会先理解你的意图,再把这个改动连贯地应用到整段视频剪辑里,不需要手动去画繁琐的遮罩。

在应用场景上,Luma 列得很细。做特效可以用来移除穿帮物体、扩展虚拟场景、切换雨雪天气;做广告可以做虚拟产品植入、替换食品原料;在影视和设计里,也能随时完成虚拟换装、材质微调或色彩修改。

三档强度滑块,但也有使用限制

为了平衡修改幅度,Luma 提供了强度调节滑块,分为 Adhere、Flex 和 Reimagine 三档。调低强度会尽量保留原始画面的细节,拉高强度则给 AI 更多天马行空的重构空间。

不过,这项早期功能也有明确的限制。首先,为了确保系统能准确锁定修改目标,你想改的东西必须在视频的第一帧就露脸,否则修改很容易失灵。

另外就是画面比例。系统目前只支持 9:16、3:4、1:1、4:3、16:9 和 21:9 这六种预设规格。如果上传了非常规比例的视频,Dream Machine 会强行裁切和转码,这可能会导致画面边缘变形或质量下降。

为什么重要

对独立创作者、广告制作人和特效剪辑师来说,这项功能最大的意义在于大幅降低了试错成本。以前在 AI 视频里改一个道具基本等于重做,现在终于有了定向微调的控制权,值得经常做视频概念验证的人现在就去试一试。

从行业来看,AI 视频的竞争重点已经从最初拼画质、拼时长的「纯生成阶段」,转向了拼可控性的「编辑与工作流阶段」。谁能让专业创作者精准控制画面的每一个像素,谁才能真正切入影视和广告的工业化流程。Luma 绕过复杂的图层绘制、直接用自然语言来驱动局部重绘,显然会逼着 Runway 和 Pika 等对手加快跟进类似的原生编辑工具。

我们认为,Luma 这一步切中要害,把后期最头疼的改方案做成了几行字的事。但「修改目标必须出现在第一帧」的门槛,也暴露出底层算法在长时序追踪和上下文理解上还有欠缺。它现在更像是一个敏捷的初级后期助手,要想彻底取代专业视效流程,还得等后续的逐帧精细控制进一步迭代。

来源 (1)

  1. [1]
    lumalabs.ai(在新标签页打开)原文lumalabs.ai

每日 AI 内容精选