本文へスキップ
IFAI

画像・動画生成

Stability AIが「Stable Animation SDK」公開、テキストや動画からアニメ生成

公開 拡散指数 38

Stability AIは開発者向けに「Stable Animation SDK」をリリースした。Stable Diffusionモデルを活用し、テキストプロンプト、参照画像、元動画の3つの方法でアニメーションを生成できる。開発者は提供されるエンドポイントを通じて、自社アプリや制作ワークフローに動画生成機能を組み込める。

Stability AIが「Stable Animation SDK」公開、テキストや動画からアニメ生成
画像:stability.ai

Stable Diffusion を使ってアニメーションを作成するには、これまで外部の拡張機能や複雑な環境構築が必要でした。Stability AI は今回、そのプロセスを公式ツールとして整理しました。

Stability AI は、アーティストや開発者向けにアニメーション生成機能を提供する「Stable Animation SDK」を公開しました。

3つのアニメーション生成手法

開発者はこの SDK を通じて、Stable Diffusion 2.0 や Stable Diffusion XL を含むすべての公式モデルを利用できます。

生成方法は大きく3種類用意されています。1つ目はテキストから直接生成する手法で、プロンプトとパラメータ設定のみで動画を出力します。

2つ目はテキストと初期画像の組み合わせで、基準となる1枚の画像を開始点として動きを展開させます。

3つ目は元となる動画とテキストプロンプトを組み合わせる方式で、既存の映像をベースにパラメータを調整しながら別の質感のアニメーションへと変換します。

なぜ重要か

開発者にとっては、これまで分散していたアニメーション生成ワークフローを単一の API エンドポイントに集約できる点が実用的です。自社アプリやサービスへの組み込みが一気に現実的になります。

静止画生成の競争が激化するなか、Stability AI が動画領域のインフラを押さえにきた格好です。

ただし、拡散モデルによる映像生成にはフレーム間のチラつきや一貫性の維持という課題がつきまといます。商用レベルの映像制作で実用になるかどうかは、パラメータ調整のしやすさと出力品質にかかっています。

情報源 (1)

  1. [1]
    stability.ai(新しいタブで開きます)原文stability.ai

毎日のAIピックアップ