跳到正文
IFAI

AIGC

Luma AI 联手 Adobe:新视频模型 Ray3 接入 Firefly

首次发布 传播指数 49

Luma AI 宣布与 Adobe 达成合作,将其新一代视频生成模型 Ray3 接入 Adobe Firefly。Ray3 支持 10 秒高拟真短片生成与轨迹涂鸦控制,主打「推理」能力。目前 Firefly 付费用户享两周无限量生成,好莱坞片厂也可单独订购。

Luma AI 联手 Adobe:新视频模型 Ray3 接入 Firefly
图:x.com

好莱坞片场要想炸掉一栋大楼或者做一段复杂的打光变色,以前需要昂贵的人工特效团队反复打磨。现在,视频生成公司正试图把这些工序压缩进同一个软件的对话框里。

AI 视频初创公司 Luma AI 宣布与 Adobe 达成合作,正式将其最新的视频生成模型 Ray3 接入 Adobe Firefly。从发布当天起,Adobe Firefly 的付费用户可以在接下来两周内不限量体验 Ray3 生成视频,两周之后将转为阶梯计费模式。好莱坞制片厂和流媒体平台也可以为旗下的电影创作者单独采购该工具。

让视频模型学会「自我修正」

自 2024 年初凭借 Dream Machine 进入大众视野以来,Luma 一直在密集迭代。这次的 Ray3 延续了业内常见的无对白 10 秒短视频规格,但把重点放在了物理写实度和多步骤理解上。

Luma AI 首席执行官 Jain 将 Ray3 称为「市面上最聪明的视频模型」。他特别强调了模型的「推理」能力,也就是模型在接到任务后能自我审视并优化执行路径,而不是逼着创作者一遍遍修改提示词来碰运气。

在演示中,Jain 展示了一段包含六个连续阶段的复杂提示词:角色先转向一束光线,随后光线改变颜色,紧接着发生爆炸。按照他的说法,市面上绝大多数模型遇到这种多阶段的因果动作都会崩溃。

除了文字提示,Ray3 还加入了一项很直观的交互:用户可以直接在静态图上涂鸦,画出人物或物体的运动轨迹,模型就会依照这条路线生成连续的位移动态。

为什么重要

我们认为,这笔合作对 Adobe 和 Luma 来说各取所需,而且走得相当务实。

对创作者来说,最大的痛点一直是视频生成的随机性。在画面上随手画线就能定轨迹、模型能听懂连贯动作,这比单纯抽卡要实用得多。趁着前两周不限量的窗口,经常做前期视觉预览和动态分镜的设计师完全值得立即上手测测它的控制精度。

从行业格局来看,视频模型赛道的竞争正在从单点技术比拼变成渠道争夺。Google Veo 3 坐拥庞大的 YouTube 训练资源和分发底座,Runway 也在好莱坞积极跑马圈地。Luma 背后虽然有亚马逊和 a16z 撑腰,但单打独斗获客成本极高,直接并入 Adobe 的创意生态是最快接触专业用户的路径。

不过隐患依然摆在眼前。两周免费期结束后的定价机制目前还没有公开,高昂的算力成本可能会劝退很多中小创作者。更关键的是,10 秒无声片段距离真正取代实拍还有十万八千里,它目前看起来更像是一个极高效的数字动态分镜工具,好莱坞制片厂是否愿意为此长期买单仍需观察。

来源 (2)

  1. [1]
    hollywoodreporter.com(在新标签页打开)原文hollywoodreporter.com
  2. [2]
    x.com(在新标签页打开)讨论x.com

每日 AI 内容精选