本文へスキップ
IFAI

研究

低照度画像を救う「ControlLight」登場:構造を崩さず光量をなめらかに再調整

公開 拡散指数 36

低照度画像の強調フレームワーク「ControlLight」が発表された。独自の損失関数によって画像の構造を維持したまま、光の強さを連続的かつ滑らかに調節できるのが特徴だ。暗所で失敗した写真も自然に補正できる。

低照度画像を救う「ControlLight」登場:構造を崩さず光量をなめらかに再調整
画像:arxiv.org

暗い場所で撮った写真を後から明るくしようとして、ノイズだらけになったり顔が白飛びしたりして諦めた経験は誰にでもあるはずです。

研究チームは低照度画像の再ライティングフレームワーク「ControlLight」を発表しました。単に画面全体の露出を無理やり持ち上げるのではなく、撮影後に仮想の照明をあて直すような自然な補正を可能にします。

単なる露出補正を超えたなめらかな光量調節

従来の深層学習を用いた低照度補正モデルは、あらかじめ決められた1段階の明るさに変換するものが大半でした。そのため実際の現場では、補正が足りないか、逆に明るすぎて不自然になるという問題がありました。

ControlLightは、連続的な光量ラベルを付けた大規模実画像データセット「Light100K」を用いて学習を行っています。

FLUX.2-Klein-9BのLoRAを活用することで、スライダーを動かすように光の強さを連続的かつ滑らかにコントロールできます。シャドウをわずかに持ち上げる程度から、しっかりとしたライティングまで、狙った明るさに細かく合わせ込めます。

構造を崩さずに陰影だけを直す工夫

光を強く当て直そうとすると、顔のパーツが歪んだり輪郭がぼやけたりしやすいのが画像生成AIの弱点でした。

そこで研究チームは、ずれを抑える独自の加権フロー・マッチング損失を導入しました。照明の強度を大きく変えても、元の被写体の構造や質感が狂わないよう制御しています。

暗所で失敗したポートレートだけでなく、ECサイトの商品写真やポスター素材の二次ライティングにも威力を発揮します。各種ベンチマーク実験でも既存手法を上回る最高水準の性能を記録しました。

なぜ重要か

一般ユーザーやコンテンツクリエイターにとって、撮影環境の悪さでボツにしていた写真を実用レベルに救い出せる価値は大きいです。特に本格的なスタジオ照明を用意できない個人開発者やネットショップ運営者にとって、後処理で自然なライティングを作れる機能は大きな武器になります。

技術的なアプローチとして優れているのは、AIの自由度を暴走させず、「連続的な操作性」と「元の構造の維持」に専念させた点です。過剰な自動生成で別人の顔にしてしまうツールが多い中、実務的な補正ツールとしての節度を保っています。

もっとも、極端な暗所で生じるカラーノイズの処理や、細かな肌の質感再現には依然として課題が残るはずです。実験室環境の数値だけでなく、過酷な実写スナップでどこまで破綻せずに耐えられるかが今後の見極めどころになりそうです。

情報源 (1)

  1. [1]

毎日のAIピックアップ