OpenAI「o3」、1問解くコストが約3万ドルに？ ARC Prizeが試算を上方修正
米TechCrunchなどの報道によると、Arc Prize FoundationがOpenAIの未提供モデル「o3」の実行コスト試算を上方修正した。最高性能のo3 highがARC-AGIの難問を1つ解く費用は、当初の3000ドルから約3万ドルに跳ね上がる見込みだ。最高スコア達成に1024回の試行が必要だったことが影響している。
Arc Prize Foundation
ARC Prizeが新基準「ARC-AGI-2」公開、人間には簡単でもLLMは0点
ARC Prize Foundationが推論・適応能力を測る新ベンチマーク「ARC-AGI-2」と2025年大会を発表した。人間なら2回以内の試行で全員解けた課題に対し、純粋なLLMは正答率0%、公開推論モデルでも一桁台に低迷している。