跳到正文
IFAI

AIGC

Runway 推出动捕模型 Act-Two:支持头面身手全追踪,单视频驱动

首次发布 传播指数 52

Runway 发布下一代动作捕捉模型 Act-Two,生成质量大幅提升,全面支持头部、面部、身体与手部追踪。创作者只需提供一段驱动表演视频和一个参考角色即可生成。不过目前仅面向企业客户和创意合作伙伴开放。

Runway 推出动捕模型 Act-Two:支持头面身手全追踪,单视频驱动
图:x.com

过去要做一套合格的动作捕捉,剧组通常得租下昂贵的动捕棚,让演员穿上贴满标记点的紧身衣,再由专业动画师花上几天清洗数据。现在,Runway 想用一段普通视频把这套流程省掉。

Runway 正式发布了下一代动作捕捉模型 Act-Two。和前代以及常见的同类工具相比,这次的核心升级是覆盖了全身细节,并把门槛压到只需要一段驱动素材。

一段视频搞定头部到手部的全套动作

按照 Runway 的说法,Act-Two 在生成画质上有了很大提升,并且一口气把追踪范围拓展到了头部、面部、身体和手部。在以往的 AI 视频生成里,手部变形和面部微表情失真一直是个顽疾,这次把四者打包追踪,就是奔着解决全身表演同步去的。

在使用方式上,它依然走轻量路线。创作者只需要提供一段真人的驱动表演视频,再加一个目标角色的参考形象,模型就能把演员的一举一动转移过去。

Runway 透露,Act-Two 能够把同一套表演搬运到各种不同风格、不同艺术走向的角色身上,同时适应各种复杂的虚拟环境,并保持表演本身的保真度。无论是写实角色还是风格化形象,都能直接套用真人的微表情和肢体动作。

不过,普通个人用户现在还摸不到它。Runway 表示,Act-Two 目前仅面向其企业客户以及创意合作伙伴开放。

为什么重要

对影视制作团队、游戏工作室和小成本广告团队来说,动捕一直是一项沉重的硬性开支。如果 Act-Two 的保真度真能达到工业可用水准,创作者用手机拍一段演员排练,就能直接生成不同风格角色的动画草稿甚至成片,前期的预演和中小项目的制作成本会被大幅拉低。

但如果你是普通创作者或独立开发者,现在并不需要急着去折腾,因为企业级门槛把它挡在了大众之外。这也在一定程度上说明,高精度的全身驱动在算力消耗或输出稳定性上,可能还没到能无限制开放的地步。

从行业竞争来看,AI 视频的战场正在从单纯的比拼画面质感,快速转向比拼精准的可控性。近期市场上既有 Moonvalley 推出的 Marey 这类强调商用安全的模型,也有 Premiere Pro、DaVinci Resolve 等老牌剪辑工具在工作流里疯狂塞入 AI。Runway 拿出 Act-Two,本质上是在用动作捕捉这个专业切口,防守自己被传统软件和其他新兴模型蚕食的专业影视阵地。

我们认为,Runway 这一步选得很精准。动画行业最缺的从来不是天马行空的静态画面,而是能听懂导演调度、保留演员微情绪的稳定角色资产。把手部和面部整合进单镜头视频驱动,切中痛点。但它的潜在隐患依然在于工业落地的容错率,在真实多机位、剧烈肢体碰撞或复杂光影下,单视角视频驱动能否经得住专业动画师挑剔的眼光,还需要企业客户在实战中交卷。

来源 (2)

  1. [1]
    @runwayml(在新标签页打开)原文x.com
  2. [2]

每日 AI 内容精选