跳到正文
IFAI

AIGC

Runway 升级 Gen-2:多运动笔刷上线,一张图可独立控制多处动态

首次发布 传播指数 53

Runway 为 Gen-2 推出 Multi Motion Brush 功能。创作者能用画笔圈出画面中不同区域,分别调节水平、垂直及远近的运动方向与速度。这意味着静止图像转视频时,不同物体的动作不再互相干扰,目前已向所有 Gen-2 用户开放。

Runway 升级 Gen-2:多运动笔刷上线,一张图可独立控制多处动态
图:x.com

过去玩 AI 视频生成,感觉像是在开盲盒:给一张静态图,模型要么让整张图一起乱飘,要么只能挑一个角落动一动。

现在纽约的生成式 AI 初创团队 Runway 想改变这种局面。他们给自家的 Gen-2 基础模型正式推了一项新工具,名字叫 Multi Motion Brush,也就是多运动笔刷。

这项功能之前只在 Runway 的创意伙伴计划里小范围测试,现在已经全量推给所有 Gen-2 用户。这也是目前商业化 AI 视频工具里,第一个支持在同一画面里给多个区域分别加上独立运动方向的产品。

像画分层图层一样指挥画面

在此之前,Runway 在 2023 年 11 月刚推出过初代单笔刷功能。那时候创作者只能选定一个区域,给它加上一种运动效果。

现在的多运动笔刷往前迈了一大步。操作其实很直观,创作者先上传一张静态图片当作底稿,然后用鼠标光标当作画笔,给不同的物体涂上不同的标记颜色。

涂好之后,Runway 的网页界面会针对每种颜色给出独立的控制滑块。你可以单独控制云朵向左飘,同时让画面里的人脸向右转,彼此完全不干扰。

具体的运动参数分为水平、垂直和景深距离三项,也就是管左右、上下以及拉近还是推远。每个滑块的调节范围是负 10 到正 10,支持精确到小数点后的微调,也可以直接拖动文本框改数字,点一下重置按钮就能全部归零。

算上这个新笔刷,Gen-2 平台里积累的创作者工具已经超过了 30 个。从 2023 年 3 月发布时只能生成 4 秒短片,到 8 月把时长放宽到 18 秒,再到后来加入控制镜头运镜方向和速度的导演模式,Runway 一直在给视频生成补齐手动控制的能力。

不过目前生成质量还谈不上完美,生成的画面依然偶尔会出现边缘模糊、动作缺失或前后帧不一致的情况。

为什么重要

对于做视频剪辑、广告提案或特效概念设计的创作者来说,这个更新非常实用。以前为了让画面里的主体和背景以不同逻辑运动,往往要导出到专业剪辑软件里抠图、分层,现在在网页端涂几笔就能快速出 Demo,值得第一时间去上手。

在行业竞争层面,AI 视频赛道现在正处于白热化阶段。Pika Labs 刚推出了网页端 Pika 1.0,Leonardo AI 也在加速跟进,Stability AI 更是开源了 Stable Video Diffusion。在底模生成画质拉不开绝对差距的前提下,谁能把控制权做得更细致,谁就能先把专业创作者留在自己的平台上。

我们认为,Runway 这一步走得相当务实。比起一味去卷更长的生成秒数,给创作者提供精准的控制手段,才是 AI 视频从好玩的玩具走向严肃生产力的必经之路。但隐患也摆在眼前:底模的画面连贯性和伪影问题只要没彻底解决,多区域控制越复杂,画面穿帮的概率可能也会随之变大。

来源 (2)

  1. [1]
    twitter.com(在新标签页打开)原文twitter.com
  2. [2]

每日 AI 内容精选