跳到正文
IFAI

AI科研

OpenAI 推出學習成效評估套件:不只看考分,還要測思維與堅持度

首次發布 傳播指數 33

OpenAI 聯手斯坦福大學和塔爾圖大學推出學習成效測量套件,用於長期追蹤 AI 對認知、元認知和堅持度的影響。此前 300 名大學生測試顯示,使用 ChatGPT 學習模式讓微觀經濟學成績提高約 15%。目前該套件正面向愛沙尼亞近 2 萬名中學生進行驗證,未來將向全球學校開放。

OpenAI 推出學習成效評估套件:不只看考分,還要測思維與堅持度
圖:openai.com

學生拿 AI 趕作業到底會變聰明還是變懶,現在誰也說不準。

考試分數提高,可能只是 AI 幫他把答案全順了一遍,並不代表腦子裡真正裝進了東西。3 月 4 日,OpenAI 拿出了一個叫做學習成果評估套件(Learning Outcomes Measurement Suite)的框架,準備和教育界一起把這筆賬算清楚。

這套工具由 OpenAI、愛沙尼亞塔爾圖大學以及斯坦福大學學習加速器的 SCALE 倡議團隊聯合打造,專門用來長期追蹤學生拿 AI 學習後的認知變化,不再只盯著一張期末考卷。

考試提分 15%,但不代表全部

去年 OpenAI 在 ChatGPT 裡推出了「學習模式」(study mode)。簡單來說,就是用系統指令約束模型,不直接給答案,而是像家教一樣給臺階、做理解檢查、帶著學生一步步推導。

為了驗證效果,他們拉了 300 多名準備神經科學和微觀經濟學考試的大學生做隨機對照實驗。對照組只能用常規搜尋和 YouTube,AI 概括功能被掐掉;實驗組則使用帶有腳手架引導的學習模式。

結果很有意思:在微觀經濟學考試中,拿到學習模式的學生成績比對照組高出大約 15%;但在神經科學科目上,實驗組的表現只是略微佔優,和用常規搜尋引擎的學生拉不開統計學上的差距。

OpenAI 自己也承認,短期的卷面分數很容易被技術手勢帶偏,甚至可能帶來隱形代價,比如雖然短期記住了知識點,但自主探索的韌性和創造力卻下降了。

把「家教輔導過程」拆開打分

為了看清學生是真學會了還是被 AI 餵飽了,這次釋出的評估套件搭了一整套評分機器。

它不再只看最後的考試結果,而是用分類器和評估模型去掃描去標識化的對話。系統會自動識別出對話裡的關鍵學習節點,看看學生是不是自己發現了錯誤、有沒有順著引導繼續深挖。

套件的核心目標是監控五種長期認知能力:自主學習動機、有效投入度、死磕難題的任務堅持度、元認知能力(即學生會不會自己規劃、反思學習過程),以及記憶回溯能力。

OpenAI 還成立了 Learning Lab 研究生態,拉來了亞利桑那州立大學、倫敦大學學院知識實驗室和麻省理工學院媒體實驗室。目前這套評估體系正在愛沙尼亞近 2 萬名 16 到 18 歲的高中生群體中進行真實場景的大規模驗證。

為什麼重要

我們認為,OpenAI 這次最聰明的舉動,是終於把 AI 教育的評測話語權往前推了一步。過去科技巨頭推銷 AI 家教,拿出的資料大多停留在「寫作業快了一倍」「模擬考提了 10 分」,學校和家長心裡其實直打鼓,生怕孩子變成了不會思考的提詞器。拉上斯坦福和愛沙尼亞教育部做長期追蹤,是想給教育採購吃一顆定心丸。

對學校和老師來說,如果這個評估套件後續真的向全球開源,它最大的價值在於提供了一套衡量 AI 教學質量的通用標尺。老師不用再全憑感覺去抓作弊,而是能在後臺看到學生到底是在偷懶抄答案,還是在用 AI 訓練高階思維。

但這裡的隱患也很明顯。所謂的自主動機、元認知和死磕難題的堅持度,本身在心理學裡就極難被量化。現在全靠打分模型去掃描對話文本,模型很容易把「話癆型學生」或者擅長說漂亮話的提問誤判為深度思考。如果這套打分機制成了標準,學生為了迎合評估,完全可能反向表演提問技巧。AI 究竟是解放了思考還是把思維標準化了,這套體系能不能自證其說,愛沙尼亞那 2 萬名高中生的長期資料才是真正的試金石。

來源 (1)

  1. [1]
    openai.com(在新分頁開啟)原文openai.com

每日 AI 內容精選