跳到正文
IFAI

AIGC

Pika 上线 Pikaswaps:画笔圈选加参考图,精准替换视频物体和背景

首次发布 传播指数 47

Pika 推出全新视频编辑功能「Pikaswaps」,让用户精准修改视频片段中的特定元素。只要用画笔圈选画面,配合文字提示或上传参考图,就能直接替换服装、表情、特定物品乃至整块背景。这让复杂的视频合成和换装操作大幅简化。

图:blogs.nvidia.com

在传统的视频后期流程里,想把画面里演员穿的外套换个颜色,或者把桌上的咖啡杯换成一盆绿植,往往得先逐帧抠像,再在 After Effects 里做追踪和调色,耗上大半天。

现在,AI 视频生成平台 Pika 打算把这个麻烦的过程简化成一次简单的涂抹涂鸦。

Pika 刚刚上线了名为「Pikaswaps」的新功能。简单来说,它支持用户在视频剪辑里用画笔圈出任意区域,然后通过输入文字提示词、或者直接上传一张参考照片,精准替换画面里的元素。

像涂改照片一样涂改视频

根据多位早期测试者的反馈,这项功能的交互相当直观。

用户可以直接在视频画面上画出想要替换的范围。不管是人物身上的服装、脸上的表情,还是桌上的具体道具、甚至整块背景,都能被圈出来定向修改。

比如测试者 @pop_ikeda 就提到,Pikaswaps 可以实现服装、表情乃至特定物品的即时替换。

作为 Pika 研究科学家团队的早期测试人员,@Rik_Vasquez 表示这项工具清晰展现了技术推进的速度。他预测今年还会看到更多令人兴奋的视频到视频(V2V)技术发布。

另一位创作者 @lepadphone 则表示,自己可以随心所欲地替换和修改画面里的对象、区域或背景。值得一提的是,这次演示里还用到了 Action VFX 提供的专业素材片段,显示出它进军专业影视创作场景的意图。

连绿幕都不需要了?

不仅能替换已有元素,Pikaswaps 还支持把现实里的物品塞进镜头里。

博主 @EHuanglu 指出,Pika 现在甚至能把用户手机拍摄的照片元素直接融入视频中,这对特效制作来说极为方便。

面对这种一键替换能力,测试者 @malonpon 甚至感叹,现在连绿幕背景合成都能随手完成,让人不禁怀疑以后是不是连传统合成软件 After Effects 都不太需要了。

不过他也提醒,这项功能在实际复杂运动中的精准度,依然有待更多严苛场景的检验。

目前,Pikaswaps 已经正式在 Pika 平台向用户开放。

为什么重要

从文生视频走向精确视频编辑,是所有视频大模型必须迈过去的一道坎。

单纯生成一段漂亮的视频固然抓人眼球,但在实际影视制作、短视频创作和广告营销中,创作者面临的永远是「这里不对,要把这个杯子换掉」「衣服颜色不对,换成蓝底」这种细节修改需求。

Pikaswaps 的聪明之处在于,它没有逼用户通过反复修改长句提示词去「抽卡」,而是结合了画笔局部重绘(Inpainting)和参考图输入。这种交互逻辑贴近直觉,让独立创作者和小型团队做概念设计、换装试镜或者低成本粗剪时,效率成倍提升。

对行业而言,这一步直接将视频生成的竞争线从「画面清晰度比拼」拉向了「可控编辑能力比拼」。这不仅会倒逼 Runway、Luma 等竞争对手加速上线类似工具,也会直接给 Adobe 等传统创意软件巨头施加压力。

不过我们认为,短期内传统特效流程还不会被立刻取代。视频局部重绘最大的难点在于时序一致性——当镜头高速运动或者物体发生复杂遮挡时,生成的新元素能不能稳稳贴住边缘、光影能不能自然契合,往往决定了它究竟是个好玩的玩具,还是真正能上大银幕的生产力工具。

来源 (2)

  1. [1]
    @pika_labs(在新标签页打开)原文twitter.com
  2. [2]

每日 AI 内容精选