本文へスキップ
IFAI

画像・動画生成

ガンズ・アンド・ローゼズの新曲ミュージックビデオに見る、UE と SD の融合制作手法

公開 拡散指数 35

ロックバンド Guns N' Roses の新曲「The General」のミュージックビデオ制作手法が明かされた。制作スタジオは Unreal Engine で制作した下地映像を Stable Diffusion に読み込ませ、各フレームを再描画して悪夢のような質感を生成。AI を人間の代替ではなく表現を拡張するツールとして活用した。

ガンズ・アンド・ローゼズの新曲ミュージックビデオに見る、UE と SD の融合制作手法
画像:decrypt.co

ミュージックビデオは昔から Dire Straits の 3D やマイケル・ジャクソンのモーフィングなど、新技術の実験場として機能してきました。ロックバンド Guns N' Roses の新曲「The General」の公式ビデオで、今度は生成 AI がその実験台に上がりました。

映像制作を手がけたのはバンドの長年のパートナーである Creative Works London です。AI に丸投げするのではなく、Unreal Engine による 3D 制作と Stable Diffusion を融合させたハイブリッド手法を採用しました。

Unreal Engine で骨組みを作り、Stable Diffusion に「夢を見させる」

映像は、マゼンタ色の不気味な街で少年の悪夢が具現化するというダークな内容です。クリエイティブディレクターの Dan Potter 氏は当初、Unreal Engine で全編 3D アニメーションとして 6 週間制作を進めていました。

転機となったのは、バンド側から届いた AI コンテストの共有でした。スタジオに 5 日間籠もった Potter 氏は、これまで構築した 3D レンダリング素材をそのまま Stable Diffusion に流し込むワークフローを確立しました。

バンド独自の世界観を保つため、過去に Guns N' Roses 向けに制作したデザイン素材を使って Hypernetwork を独自に追加学習。6〜7 人のアーティストが作った Unreal Engine のカメラワークや構図を下敷きにし、その上から AI にフレーム単位でテクスチャを描き直させました。

AI がフレームごとに画像を生成するため、テディベアが椅子に溶け崩れ、ヒエロニムス・ボスの絵画のような生体機械の怪物が背景で明滅するような、独特の不気味な映像が完成しました。ボーカルの Axl Rose の実写映像も「未来の狂気的なロックスター」といったプロンプトで加工され、手描きのグラフィティや隠しロゴなどの人手によるレタッチも重ねられています。

Potter 氏は今後、ライブ会場の大型スクリーン(iMAG)にリアルタイム AI と AR を組み合わせ、観客がゴーグルを通じてステージ上のバンドの周囲に幻覚のような視覚効果を体験できる演出も構想しています。

なぜ重要か

クリエイターにとって最大の収穫は、実務に耐えうる AI ワークフローの現実的な解が示されたことです。現行の動画生成 AI はカメラ制御や形状の維持が苦手ですが、3D ソフト側で構図と動きを完全に固定し、AI を「超高機能な質感変換レイヤー」として使うことで破綻を抑え込んでいます。

このやり方は非常に合理的です。AI にゼロから作らせるのではなく、人間のアーティストが作った下絵や 3D モデルを増幅させる道具として位置づけています。制作時間を圧縮しつつ、人間のディレクションを最後まで通すための現実的な落としどころと言えます。

私たちは、現在の商業制作においてこれが最も健全な AI の使い方だと考えます。AI 特有のフレーム間のチラつきや変形はサイケデリックな悪夢という演出意図にぴったり合致していますが、一般的なドラマ映像ではノイズになりかねないという限界もあります。それでも、既存のハイエンド CG パイプラインに AI をどう組み込むかを示す実用例として、業界全体にとって示唆に富む一手です。

情報源 (1)

  1. [1]
    decrypt.co(新しいタブで開きます)原文decrypt.co

毎日のAIピックアップ