本文へスキップ
IFAI

AIツール

BFLが「FLUX.1 Tools」公開:画像編集や構図制御に対応

公開 拡散指数 42

BFLは画像生成の制御性を高める「FLUX.1 Tools」を発表した。再描画や拡張を行うFill、深度やエッジ情報を保つDepthとCanny、バリエーションを作るReduxで構成される。なおDepthとCannyのAPIサポートはその後終了している。

BFLが「FLUX.1 Tools」公開:画像編集や構図制御に対応
画像:blackforestlabs.ai

FLUX.1 Toolsは、画像生成モデルFLUX.1に高精度な局所再描画、領域拡張、深度や輪郭による構図制御、画風の再構築機能を追加する公式コントロールモデル群だ。

FLUX.1の高画質を活かしつつ、既存の画像を細かく修正したり、指定した構図のまま描き直したりしたいクリエイターに向けたツールとなっている。商用向けのAPI提供に加えて、オープンアクセスなFLUX.1 [dev]向け重みも公開されている。

4つのツールでできること

本スイートは、用途の異なる4つの機能で構成されている。

1つ目は部分修正とキャンバス拡張を担うFLUX.1 Fillだ。元画像、白黒マスク、テキストプロンプトを指定することで、境界線を自然に馴染ませながらインペインティングやアウトペインティングが行える。BFLのベンチマークによると、Ideogram 2.0やオープンソースのFLUX-Controlnet-Inpaintingを上回る性能を示した。

2つ目はFLUX.1 Depthで、画像の深度マップを抽出して空間的な奥行きを維持したまま、プロンプトに応じた質感の変更ができる。MidjourneyのReTextureを上回る精度とされている。

3つ目は線画や輪郭線を保持するFLUX.1 Cannyだ。構図の骨格を崩さずにテキストから新しい画像を生成できる。DepthとCannyにはフルモデルのほか、軽量なLoRA版も用意された。

4つ目は画像バリエーションやスタイル変換を行うFLUX.1 Reduxだ。入力画像とプロンプトを掛け合わせることで構図を保った別カットを作成できる。APIではFLUX1.1 [pro] Ultraと連携し、最大400万画素の高解像度出力にも対応する。

公開状況とAPIのサポート終了

導入にあたって注意したいのが、機能ごとの提供状況の違いだ。

オープンモデルとしては、FLUX.1 [dev]向け重みとLoRAがHugging Faceで公開されており、Flux Dev Licenseのもとで利用できる。推論コードはGitHubにあり、fal.ai、Replicate、Together.ai、Freepik、krea.aiなどのプラットフォーム経由でも扱える。

一方で、公式APIに関しては重要な変更があった。BFLはFLUX.1 DepthとFLUX.1 CannyのAPIサポートを終了すると発表した。これらのエンドポイントは廃止されたが、Hugging Face上の重みファイルは研究・検証用としてそのまま残されている。FLUX.1 FillとFLUX.1 Reduxについては現在もAPIでサポートが続いている。

なぜ重要か

これまでプロンプト頼みの一発生成になりがちだったFLUX.1が、制作実務に耐えうる編集機能を公式に手に入れた意義は大きい。とりわけFLUX.1 Fillによる再描画は、サードパーティ製プラグインに頼らずに高品位なレタッチを完結させられる。

DepthとCannyのAPI運用を打ち切った動きを見る限り、BFLはリソースを需要の高いFillやReduxなどの汎用編集機能に集中させる方針と思われる。ComfyUIなどのローカル環境で制作を組むならHugging Faceからモデルを落とす価値が十分にあるが、クラウドAPIで新サービスを作るならFillとReduxを中心に設計するのが無難だ。

情報源 (1)

  1. [1]
    blackforestlabs.ai(新しいタブで開きます)原文blackforestlabs.ai

トピックを追うBlack Forest Labs の FLUX モデルシリーズ

このトピックのニュース。新しい順です。

  1. Black Forest LabsがFLUX ProファインチューニングAPIを公開
  2. Black Forest LabsがFLUX1.1 [pro]にUltra・Rawモードを追加、解像度4倍で10秒生成
  3. BFLが「FLUX.1 Tools」公開:画像編集や構図制御に対応この記事
  4. Black Forest Labsが「Flux1.1 Pro」公開:生成速度6倍、APIベータ版も提供
  5. Black Forest Labsが3100万ドル調達し発足、画像生成AI「FLUX.1」を公開

毎日のAIピックアップ