FreeFuseが登場：複数LoRAの競合を防ぎ、崩れず自然な合成を実現

画像生成AIで複数のLoRAを同時に使うのは、これまでかなり難易度の高い作業でした。2人の特定キャラクターを同じ構図に配置し、さらに特定の画風や小道具のLoRAを重ねると、顔が混ざり合ったりスタイルが破綻したりして生成が崩れがちでした。

新しく公開された「FreeFuse」は、こうした複数LoRAの干渉問題を解決するために開発された学習不要のフレームワークです。

トークン単位で適用領域を交通整理する

複数のLoRAを同時に読み込むと、お互いの重みがキャンバス全体で干渉し合い、意図しない変形を引き起こします。

FreeFuseは「適応型トークンレベルルーティング（adaptive token-level routing）」を採用しています。生成過程で各オブジェクトのトークンを適切な領域へ動的に割り振ることで、指定したLoRAの効果が他の要素を上書きしないよう分離します。

SDXLやZimageでの比較例では、通常なら崩れてしまう複数キャラクターの顔立ちやプロップの整合性が、FreeFuseを通すことで安定して保たれる様子が示されています。

すでにComfyUIに対応した形で公開されており、ComfyUI上でZimage Turboを動かす環境もサポートされています。今後はFlux 2クライアントへの対応も予定されています。

なぜ重要か

クリエイターにとって、LoRAの衝突による崩れを防ぐためにインペイントやレイヤー分け生成を繰り返す手間が省けるのは大きな利点です。

追加のモデル学習を一切必要とせず、推論時の制御だけで複数LoRAの共存を可能にしたアプローチは非常に合理的だと考えられます。手軽に導入できる一方、キャラクター同士が密密に重なり合う複雑な構図でどこまで綺麗に境界を分けられるかは、今後のコミュニティによる検証が見どころになります。