Pikaが動画編集機能「Pikaswaps」を公開:テキストや画像で動画内の被写体を自在に入れ替え
Pikaが動画内の特定要素を精密に差し替えられる新機能「Pikaswaps」をリリースしました。ブラシで対象を指定し、プロンプトや参照画像を渡すだけで、衣装や表情、背景などを手軽に変更可能。従来の動画合成やVFX作業のハードルを大きく引き下げています。
従来の動画編集において、映像内の衣装を変えたり小物を別のアイテムに差し替えたりする作業は、After Effectsなどを使った緻密なロトスコープやトラッキングが必要で、膨大な手間がかかる工程でした。
Pikaがリリースした新機能「Pikaswaps」は、その複雑な作業をブラシひとつで済ませようとしています。
Pikaswapsは、動画内の特定エリアをブラシツールで指定し、プロンプト入力や参照画像のアップロードによって被写体を精密に置き換えられる動画編集ツールです。
ブラシで塗ってプロンプトを入れるだけ
先行テスターらの投稿によると、操作性は極めて直感的です。
動画上の変更したい部分をブラシでなぞり、テキストで指定するか画像を添えるだけで、被写体の差し替えが完了します。小物の変更だけでなく、人物の衣服や表情、さらには背景全体まで自在に置き換えることができます。
Pikaの研究開発チームで先行テストに参加した@Rik_Vasquez氏は、技術の進化スピードを実感したと述べ、年内にはさらに刺激的なVideo-to-Video(V2V)技術が登場すると予測しています。
また、クリエイターの@lepadphone氏も、対象物や背景を驚くほど自然に改変できると評価。検証映像にはAction VFX提供の素材が使われており、プロクオリティの映像制作現場を強く意識した仕上がりを見せています。
グリーンスクリーンの代替になるか
差し替えにとどまらず、新しいオブジェクトを合成する能力も注目されています。
@EHuanglu氏は、スマートフォンなどで撮影した写真の被写体をそのまま動画内に違和感なく追加できる点を挙げ、VFX用途での実用性を絶賛しています。
テスターの@malonpon氏は、グリーンスクリーン合成のような処理があまりに手軽に行えるため、After Effectsのような既存ソフトの必要性に疑問を投げかけるほどだとコメント。ただし、複雑な動きにおける輪郭の精度などは、今後のさらなる検証が必要だと指摘しています。
Pikaswapsは現在、Pikaの公式プラットフォームで利用可能になっています。
なぜ重要か
AI動画生成が「文章から動画を作る面白さ」から「狙った通りに直せる実用ツール」へと移行し始めたことを示す好例です。
実際の映像制作現場では、全コマを生成し直すのではなく、「このコップだけ花瓶に変えたい」「服の色だけ変えたい」といった局所修正が日常茶飯事です。ブラシ範囲指定と参照画像を組み合わせたPikaswapsのアプローチは、運任せのプロンプト入力からクリエイターを解放してくれます。
個人クリエイターや広告制作チームにとっては、大がかりな撮影やVFXの機材を用意しなくても、アイデアの検証やモックアップ作成を一瞬で終わらせられるメリットがあります。RunwayやLuma、さらにはアドビなどの既存ツールベンダーにとっても、局所編集機能の強化は急務となるはずです。
一方で、ハリウッド水準の映像制作にそのまま導入できるかはまだ未知数です。被写体が激しく動いたり遮蔽物が生じたりした際に、フレーム間でチラつきなく整合性を保ち続けられるかどうかが、実用ツールとしての真の分水嶺になると考えられます。
情報源 (2)
- @pika_labs(新しいタブで開きます)原文twitter.com
- @EHuanglu(新しいタブで開きます)議論x.com