跳到正文
IFAI

大模型

OpenAI 購買 FrontierMath 驗證器:自動檢驗模型生成的數學解法

首次發布 傳播指數 45

Epoch AI 宣佈 OpenAI 購買了 FrontierMath: Open Problems 驗證器訪問許可權。該基準彙集了極高難度的數學難題,此舉讓 OpenAI 能夠自動核驗模型生成的解法是否嚴謹有效,為高階推理能力的評估提供更可靠的支撐。

OpenAI 購買 FrontierMath 驗證器:自動檢驗模型生成的數學解法
圖:x.com

AI 要去解最頂尖的數學難題,最頭疼的往往不是怎麼把答案寫出來,而是寫出來之後,誰能說得準它到底對不對。

Epoch AI 透露,OpenAI 已經購買了 FrontierMath: Open Problems 驗證器的訪問許可權。有了這套驗證器,OpenAI 就能自動檢查模型生成的數學解法在邏輯和數學上是否成立。

FrontierMath 本身是 Epoch AI 推出的一套極難數學基準,專門用來挑戰最前沿的 AI 系統。

給數學大模型配上自動判卷機

評估這種超高難度的開放式數學題,一直是個苦差事,過去往往得靠頂尖數學家花大量時間肉眼審查。

現在 OpenAI 拿到了驗證器的介面,就能在測試高階數學推理能力時,更可靠、更大規模地校驗模型輸出,省去了大量人力消耗。

為什麼重要

對於專注於強推理的模型來說,可靠的反饋訊號就是生命線。如果系統無法自動判斷一個證明是否有效,強化學習和能力評估就會迅速碰壁。

我們認為,OpenAI 這一步走得相當務實:與其花大把時間自己從頭搭一套頂尖數學的驗證基準,不如直接向專業機構買成熟工具的訪問權。

這也看起來表明,行業對前沿模型的競爭,正在從單純看公開跑分,轉向用嚴格的自動化驗證來啃真正困難的複雜推理。

來源 (1)

  1. [1]
    @EpochAIResearch(在新分頁開啟)原文x.com

每日 AI 內容精選