跳到正文
IFAI

AIGC

Runway 推出 Aleph 视频模型:支持任意改视角、增删物体和调光

首次发布 传播指数 52

Runway 发布上下文视频模型 Runway Aleph。它主打多任务视频生成与编辑,能直接在原视频上增删物体、改变场景视角,甚至任意修改风格与光照。目前已向所有付费用户开放。

Runway 推出 Aleph 视频模型:支持任意改视角、增删物体和调光
图:runwayml.com

过去在影视后期里改镜头,向来是件让人头疼的苦差事。不管是想把大晴天换成暴风雪、换掉背景里穿帮的高楼,还是导演临时想要一个反打低机位,通常都意味着重拍或者特效团队没日没夜地逐帧修图。

Runway 发布了名为 Aleph 的全新视频模型,试图让这套繁琐的后期流程彻底变天。官方把它定义为前沿的上下文视频模型,说白了,就是把一段现成的视频塞给它,再用几句自然语言指令,直接在原片里添砖加瓦或者推翻重来。

一键换天气,还能给镜头「重新机位」

Aleph 并不是从零凭空画画,而是以你上传的视频作为上下文参考。这意味着它能在保留原有画面结构和动态的前提下,完成过去需要多种专业软件协作的修片工作。

从官方展示的能力来看,它最扎实的地方在于对场景环境的重构。比如上传一段晴天早晨的公园素材,你可以让它下暴雨、起沙尘暴、飘雪花,甚至直接转成深夜,而镜头里原本的人和动作依然保持原样。

更让影视创作者兴奋的是机位生成能力。你可以直接向它要一个完全不存在的视角,比如从右侧推上去的特写,或是舞台的全景广角,甚至生成紧接着这一镜头的后续画面。

在细节编辑上,Aleph 也能搞定增删物体的常规操作。擦掉建筑的反光、直接抹掉穿帮的背景楼宇,或者更换角色的外貌和衣服颜色,都能用文字指令交代清楚。官方还提到,它甚至能提取一段运镜轨迹,比如无人机的穿梭动作,直接套在另一个全新的场景里。

目前 Runway 已经面向所有付费用户开放了这项功能。不过关于输入视频的时长限制、支持的分辨率和画幅比例,以及后续的 API 接口价格,官方暂时还没有公布具体细节。

为什么重要

我们认为,Aleph 标志着 AI 视频工具正在从好玩的「生成玩具」,真正走向工业级的「后期工作流」。

以前不管是文生视频还是图生视频,最大的痛点就是不可控。镜头稍微不满意就得全部重抽盲盒,几乎不可能配合真正的专业分镜。Aleph 这种直接在现有素材上修修补补的做法,聪明就在于它放低了 AI 的身段,让它去当剪辑师和特效师的助手,而不是非要取代整部电影的前期拍摄。

对于个人创作者和中小制作团队来说,这种能力值不值得现在就上手用?答案显而易见。如果只要几句话就能补拍一个侧面特写,或者把低成本实拍素材改成赛博朋克风,小团队节省的预算将是极其可观的。

对行业而言,Runway 实际上开辟了一条新战场。眼下大家都在比拼生成画质有多高清、时长有多长,但好莱坞和商业制作需要的恰恰是精确控制。既然迪士尼、Netflix 和亚马逊本来就已经是 Runway 的客户,Aleph 这种直击剪辑痛点的产品,大概率会逼着 Sora 和其它竞争对手尽快拿出更深度的可控编辑方案。

来源 (2)

  1. [1]
    runwayml.com(在新标签页打开)原文runwayml.com
  2. [2]

每日 AI 内容精选