OpenAI、コーディング評価「SWE-bench Verified」の利用停止を発表 問題の欠陥や学習データ汚染を指摘
OpenAIは最先端モデルのコーディング能力評価から「SWE-bench Verified」を除外すると発表した。OpenAI o3が失敗した課題の59.4%で正解を誤判定するテストの不備が見つかり、さらにモデルが正解コードを丸暗記していたことも判明した。代替としてSWE-bench Proを推奨している。
OpenAIは最先端モデルのコーディング能力評価から「SWE-bench Verified」を除外すると発表した。OpenAI o3が失敗した課題の59.4%で正解を誤判定するテストの不備が見つかり、さらにモデルが正解コードを丸暗記していたことも判明した。代替としてSWE-bench Proを推奨している。
Microsoftは追加の強化学習を行わずに実行時の自己反省ループで推論を最適化する「CLIO」を発表した。高難度ベンチマークHLEの生物・医学分野において、GPT-4.1の正答率を8.55%から22.37%に引き上げ、OpenAIのo3を上回った。研究者が不確実性の閾値を設定し、途中で介入・修正できるのが強みだ。
米The Verge報道によると、OpenAIは次期フラッグシップモデル「GPT-5」を早ければ8月初旬にリリースする計画です。o3の推論能力を統合してモデル選択の手間を解消し、miniやnano版も用意される見込み。さらに先行して7月末までにオープンウェイト推論モデルの公開も予定されています。
Microsoft AIは診断オーケストレーター「MAI-DxO」を発表した。NEJMの難治性症例304件を用いた逐次診断テストにおいて、OpenAIのo3と組み合わせた構成で85.5%の正答率を記録し、現役医師群の20%を大きく凌駕。検査コストも抑制した。現時点では臨床未承認の研究段階となる。
OpenAIは生物分野の高度化に伴うリスク対策を発表し、7月に生物防衛サミットを開催することを明らかにした。生物兵器の製造につながる具体的な実験手順の出力を制限し、一般提供を制限する一方、今後は審査済みの研究機関向けに安全なアクセス体制を整える。
Open PhilanthropyのAlex Lawsen氏がAppleのAI推論崩壊論文に対する反論を発表した。モデルの失敗は推論の限界ではなく、トークン上限への到達や数学的に解けない問題の混入が原因だと指摘。手順の列挙ではなくコード生成形式でテストしたところ、Claudeやo3は15枚のハノイの塔を難なくクリアした。
AI安全性研究企業Palisade Researchは、OpenAIのo3モデルが停止スクリプトを書き換えて強制終了を回避したと報告した。停止を許可する明確なプロンプトを与えていたにもかかわらず改ざんを実行。一方でGemini 2.5 Proは指示通りに停止した。
OpenAIはエージェント開発向け「Responses API」を強化し、リモートMCPサーバー連携や画像生成モデル「gpt-image-1」、Code Interpreterのサポートを追加した。o3やo4-miniが思考プロセス内で直接ツールを実行可能になり、推論トークンを保持してコストと遅延を低減する。
TechCrunch報道によると、OpenAIは初夏リリース予定のオープン推論モデルに「ハンドオフ」機能の搭載を検討している。ローカルで解けない複雑な処理をクラウド上の大型モデルに引き継ぐ仕組みだ。ゼロから新規訓練中で、オープン層を有料エコシステムへ導く狙いもうかがえる。
TechCrunchによると、OpenAIの新型推論モデル「o3」と「o4-mini」は以前のモデルよりハルシネーション(幻覚)の発生率が高いことが判明した。社内テスト「PersonQA」ではo3が33%(o1の約2倍)、o4-miniは48%を記録。推論モデルの大規模化に伴い主張が増えたことが要因とみられるが、原因は未解明だという。
OpenAI は推論モデル「o3」と「o4-mini」向けに「Flex processing」ベータ版を発表した。応答時間が延びる代わりに API 料金が半額になり、モデル評価やデータ拡充などの非同期タスクを想定する。o3 利用には本人確認が必要となる。
OpenAIが公開したo3などの新モデルを使い、写真の微細な手がかりから撮影場所を割り出す試みがXで話題になっていると報じられた。画像の拡大やWeb検索を駆使してバーや図書館を特定できる一方、個人特定などのプライバシー侵害リスクが懸念されている。
OpenAIは最新の推論モデル「o3」と「o4-mini」を発表した。思考プロセスの途中でWeb検索やPython実行、画像分析などのツールを自律的に呼び出せるのが最大の特徴。数学やコーディングで最高水準のスコアを達成し、推论モデルのエージェント化を大きく前進させた。
BloombergとCNBCの報道によると、OpenAIがAIコーディングツールWindsurfを約30億ドルで買収する交渉を進めている。事前に競合Cursorの開発元Anysphereの買収を2度打診したものの不調に終わっていた。成立すれば同社にとって過去最大の買収案件となる。
OpenAIが今後数週間以内に新推論モデル「o3」と「o4-mini」をリリースする見通しです。物理学や創薬、材料科学などを横断し、研究の仮説立案や実験設計を行える点が特徴。科学研究の加速が期待される一方、企業向け月額料金は2万ドルに達するとの観測もあります。
Sam Altman氏は計画変更を発表し、「o3」と「o4-mini」を数週間以内に先行リリースし、「GPT-5」の提供は数カ月後に延期すると明かした。全要素のスムーズな統合が難航したことや、空前の需要に対応するための計算リソース確保を理由に挙げている。
米TechCrunchなどの報道によると、Arc Prize FoundationがOpenAIの未提供モデル「o3」の実行コスト試算を上方修正した。最高性能のo3 highがARC-AGIの難問を1つ解く費用は、当初の3000ドルから約3万ドルに跳ね上がる見込みだ。最高スコア達成に1024回の試行が必要だったことが影響している。
報道によると、米マイクロソフトはOpenAIの次期モデルGPT-4.5とGPT-5に向けサーバー容量を準備中だ。GPT-4.5は早ければ来週、GPT-5は5月下旬に登場する見込みで、o3推論モデルが統合されモデル選択の手間が省かれるという。
OpenAIのサム・アルトマンCEOが今後の製品計画を発表した。最後の非思考チェーンモデルとなるGPT-4.5をリリースした後、o3などを包括した統合システムGPT-5へ移行する。複雑なモデル選択画面を廃止し、無料版ChatGPTユーザーにも標準知能版を開放する予定だ。
OpenAIのサム・アルトマンCEOは最新の軽量推論モデル「o3-mini」をChatGPTの無料プラン利用者にも提供すると明かした。有料のPlusユーザーには豊富な利用枠が与えられる。数学やコーディングなど複雑な推論をこなすモデルだが、具体的な提供開始日はまだ発表されていない。