マイクロソフト、画像認識モデル「Florence」をAzureでプレビュー提供　Redditが画像説明生成に採用

マイクロソフトが2年前に発表した次世代コンピュータビジョンモデル「Florence」が、いよいよ商用サービスとして提供されます。同社は、Azure Cognitive Services の Vision API をアップデートし、既存の Azure ユーザー向けにプレビュー版の提供を開始しました。

従来の画像認識モデルは特定タスクに特化した単一機能のものが主流でしたが、Florence は言語、画像、動画を横断して理解するマルチモーダル基盤モデルとして設計されています。十億単位の画像とテキストのペアで学習されており、背景除去や動画の要約、画像検索などを一つのモデルでこなします。

リンゴの品種識別から Reddit の画像解説まで

Azure AI 担当バイスプレジデントの John Montgomery 氏によると、Florence は動画内の特定フレームの検索はもちろん、コズミック・クリスプとハニークリスプといったリンゴの微細な品種の違いまで見分けられる精度を持ちます。

このモデルをいち早く導入したのが、大手掲示板プラットフォームの Reddit です。同社は Florence を活用して投稿画像に代替テキスト（alt 属性）を自動生成し、視覚障がいを持つユーザーへのアクセシビリティを向上させます。

さらに Florence は1枚の画像につき最大10,000個のタグを生成できるため、Reddit はこれを投稿検索のランキング改善にも活用する計画です。またマイクロソフト内部でも、Teams の動画セグメンテーション、Office 製品の代替テキスト生成、OneDrive や Designer の画像検索や背景生成に Florence が組み込まれています。

なぜ重要か

私たちが注目すべきだと考えるのは、バラバラだった画像処理パイプラインが単一のマルチモーダル API に統合され始めた点です。これまで画像認識、テキスト生成、背景切り抜きなどを別々のモデルで組み合わせていた開発者にとって、システム構成の簡素化とコスト削減の恩恵は非常に大きいと言えます。

特に Reddit のような膨大なユーザー投稿（UGC）を抱えるサービスにとって、画像の中身を正確なテキスト情報に変換できる価値は絶大です。単にアクセシビリティを高めるだけでなく、これまで検索できなかった画像コンテンツを資産化し、検索やレコメンドの精度を一気に引き上げることが可能になります。

一方で、学習データの透明性には課題が残ります。マイクロソフト側はパートナーデータを含む適切な入手元から収集しクリーニングしたと説明していますが、著作権侵害をめぐる懸念が業界全体で高まる中、具体的な学習ソースが開示されていない点は今後のエンタープライズ導入における潜在的なリスクとなりそうです。