本文へスキップ
IFAI

オープンソース

マイクロソフト、14Bモデル「Phi-4」の重みをHugging Faceで完全OSS化 MITライセンスで商用利用も可能

公開 拡散指数 55

米Microsoftは、140億パラメータの推論特化型モデル「Phi-4」の公式モデル重みをHugging Face上で完全オープンソース公開した。従来のAzure限定から、商用利用可能なMITライセンスでの提供に移行。開発者はTransformersやvLLMを用いてローカル環境に自由に導入できる。

マイクロソフト、14Bモデル「Phi-4」の重みをHugging Faceで完全OSS化 MITライセンスで商用利用も可能
画像:huggingface.co

Phi-4は、Microsoftが開発した140億パラメータ(14B)のオープンAIモデルです。数学やコーディング、論理的推論に特化して設計されており、今回Hugging Face上で公式のモデル重みが完全公開され、商用利用が自由なMITライセンスで提供が開始されました。

本モデルは2024年12月にMicrosoft Azure AI Foundry上で限定公開されていましたが、コミュニティからの重み公開への要望を受け、公式リポジトリとして誰でもダウンロード可能な形で一般開放されました。

大規模モデルを凌駕する推論ベンチマーク

Phi-4の最大の特徴は、14Bという中規模サイズでありながら、難関ベンチマークで大型モデルを上回る推論性能を発揮する点にあります。

高難度の数学タスクであるMATHやMGSMベンチマークにおいて80%以上のスコアを記録し、GoogleのGemini ProやOpenAIのGPT-4o-miniといった先行モデルを凌駕しています。また、コード生成能力を測るHumanEvalでも高い性能を示しており、開発支援や分析業務に適しています。

設計仕様とローカルでの実行方法

アーキテクチャは16Kトークンのコンテキスト長を持つDense型のデコーダーオンリーTransformerです。

学習には1920基のH100 GPUを用い、約21日間で9.8兆トークンのデータを処理しました。データには厳選されたウェブデータに加え、数学や論理的思考に特化した教科書風の合成データ、学術書やQ&Aデータセットがブレンドされており、約8%の多言語データも含まれています。さらにSFTやDPOによるアライメント調整が施されています。

導入も容易で、Hugging FaceのTransformersライブラリから直接呼び出せるほか、vLLMやSGLangを使った高速な推論サーバーの構築、Docker Model Runnerによるコンテナ起動に標準対応しています。

なぜ重要か

個人のエンジニアや企業にとって、14Bは一般的なサーバーや高性能なワークステーションで十分にローカル運用できる扱いやすいサイズ感です。そのサイズでトップクラスの推論力を持ち、MITライセンスによって商用開発やカスタマイズが完全に自由化された意義は小さくありません。

クラウド依存を避け、自社インフラ内でセキュアに高度な推論やコード生成を実行したいユーザーにとって、Phi-4は今すぐ検証に値する有力な選択肢になると考えられます。

情報源 (3)

  1. [1]
    venturebeat.com(新しいタブで開きます)原文venturebeat.com
  2. [2]
    huggingface.co(新しいタブで開きます)報道huggingface.co
  3. [3]

トピックを追うMicrosoft Phi-4 のリリース

このトピックのニュース。新しい順です。

  1. Microsoft Edgeに小型モデル「Phi-4-mini」内蔵、開発者向けAI APIを提供
  2. マイクロソフト、小型モデル「Phi-4」発表:音声・画像・テキストを単一処理
  3. マイクロソフト、14Bモデル「Phi-4」の重みをHugging Faceで完全OSS化 MITライセンスで商用利用も可能この記事
  4. マイクロソフトが小型モデル「Phi-4」公開、数学推論を大幅強化

毎日のAIピックアップ