跳到正文
IFAI

產業動態

OpenAI 呼籲制定全球 AI 標準:管住「AI 自己搞研發」的失控風險

首次發布 傳播指數 39

OpenAI 呼籲美國牽頭建立前沿 AI 國際技術標準,重點監管 AI 的遞迴自我改進(RSI)。OpenAI 警告,若缺乏統一標準,自主研發可能導致人類失去對 AI 演進的實際控制權。該倡議主張依託各國 AI 安全機構,確立通用的能力評測與事件通報機制。

OpenAI 呼籲制定全球 AI 標準:管住「AI 自己搞研發」的失控風險
圖:openai.com

當 AI 開始替人類研究下一代更聰明的 AI 時,最大的麻煩可能不是它做不到,而是人類很快就會看不懂它到底是怎麼做出來的。

OpenAI 釋出了一篇名為《為下一階段 AI 建立標準》的倡議,呼籲由美國牽頭,聯合全球各國共同制定前沿 AI 的技術標準。OpenAI 緊盯的核心焦點,是一個被稱為遞迴自我改進的技術階段。

所謂遞迴自我改進,簡單說就是讓 AI 承擔越來越多的科研與工程工作,由它自己驅動下一代 AI 的迭代。OpenAI 直言,完全自主的自我改進目前還沒有發生,但如果沒有任何防護規範就盲目推進,人類很可能會徹底失去對 AI 研發流程的實際控制權。

先給 AI 的自我升級立規矩

OpenAI 在倡議中提出,這項標準並不打算變成強制性的發牌許可,也不是搞發版前的硬性行政審批,而是想參考民用航空和國際金融體系的做法,建立一套全球公認的通用度量衡。

他們建議依託現有的國家級 AI 安全機構網路來推進這件事。這個網路已經覆蓋了美國、英國、日本、韓國、德國、法國、新加坡、印度、肯亞和澳大利亞等國家,可以通過美國的人工智慧標準與創新中心等機構展開多方協作。

具體要管什麼?OpenAI 拆出了幾個非常具體的指標。首先是測量一家機構內部究竟有多少研發工作是由 AI 自主完成的,並評估其遞迴進展;其次是明確人工監督的紅線,規定哪些高風險研究環節必須立刻觸發人工介入審查。

此外,他們還主張建立統一的事故分級與報告標準。OpenAI 提到了此前披露的 Hugging Face 安全事件,認為這類事件就是在給未來更嚴重的失控風險敲警鐘。除了西方盟友體系,OpenAI 還明確提到美中兩國應在關鍵基礎設施安全和 AI 威脅預警上建立對話渠道。

為什麼重要

對普通開發者和中小企業來說,這份倡議最直接的影響是未來的合規門檻。OpenAI 嘴上雖然強調標準不能擠壓開源模型和初創團隊的生存空間,但只要對前沿能力和研發流程劃定統一測量線,大模型競爭的技術門檻和合規成本必然會水漲船高。現在做普通 Agent 的開發者倒不用慌,但那些嘗試用模型做全自動化程式碼演化、自我迭代的極客團隊,很快會發現自己撞上安全紅線。

對整個行業而言,這看起來是頭部大廠在試圖搶奪遊戲規則的定義權。OpenAI 這兩年的研究已經深度依賴 AI 自主寫程式碼,它比任何人都清楚自己正衝向人類認知的邊緣。在監管真正從外部砸下大棒之前,搶先呼籲政府出面立規矩,既能把自己做出的安全評估工具推成國際基準,又明確拒絕了發牌制這種會捆住手腳的審批模式,這步棋走得非常精明。

不過,我們認為這裡的隱患也寫在明處。遞迴自我改進的邊界極其模糊,什麼是輔助研發,什麼是失去控制,業界根本沒有客觀共識。如果把標準制定的主導權過度收攏在少數幾家頭部閉源巨頭和特定國家安全機構手裡,全球開源社群能否真正擁有平等的發言權,依然要打一個大大的問號。

來源 (1)

  1. [1]
    openai.com(在新分頁開啟)原文openai.com

每日 AI 內容精選