跳到正文
IFAI

產業動態

OpenAI 政策研究員 Rosie 離職:AGI 準備團隊解散後難以為繼

首次發布 傳播指數 47

在 OpenAI 工作三年半的政策研究員 Rosie Campbell 宣佈離職。此前負責人 Miles Brundage 離職且 AGI Readiness 團隊被解散,她表示在內部已看不到繼續前沿安全研究的空間,計劃轉到外部推進 AI 治理。

OpenAI 政策研究員 Rosie 離職:AGI 準備團隊解散後難以為繼
圖:livemint.com

OpenAI 的安全團隊又走了一位老員工。這次是研究政策與安全治理將近三年半的 Rosie Campbell。

她在 2021 年年中加入 OpenAI,最初負責 API 的安全政策與流程,後來轉入政策研究團隊,跟著前 AGI Readiness 負責人 Miles Brundage 一起死磕 AI 治理、前沿政策以及「AGI 準備度」。

然而,隨著 Miles Brundage 此前宣佈離職,整個 AGI Readiness 團隊也遭到了解散。Rosie 在發給內部 Slack 的告別信中坦言,她已經看不到在公司內部繼續做這類研究的容身之地,因此決定離開,轉向外部尋找更有效的途徑。

一封寫給前同事的提醒信

在 OpenAI 的三年半里,Rosie Campbell 負責的課題聽起來都挺前沿,甚至有點「怪」:比如危險能力評估、數字感知、智慧體系統的治理。用她的話說,當一家公司開始認真對待變革性 AI 出現的可能性時,這些看似被忽視的研究其實格外重要。

她對公司過去一年的轉變感到不安,尤其是眼看著許多曾經塑造 OpenAI 文化的人接連離開。在告別信裡,她給留下的人提了四點建議。

第一,別忘了使命不只是「造出 AGI」,更重要的是確保它能讓全人類受益。第二,必須正視現有安全策略可能根本頂不住未來幾年裡更強大系統的風險。第三,即使真相再讓人難堪、再難面對,也要試著把真話說出來。第四,要帶著應有的莊重感行事,因為眼前在造的絕不是又一款普通的科技產品。

至於下一步,Rosie 表示自己會先休息一段時間,讀書、寫作,並在尋找下個去處前,找業內各方深入聊聊 AI 安全與政策的盲區。她關注的議題包括評估體系的侷限性、潛在的 AI 感知與道德地位,以及人類該如何與擁有目標和偏好的智慧體共存。

為什麼重要

對關心 AI 安全的開發者和公眾來說,這絕不僅是一個普通研究員的離職。AGI Readiness 團隊的解散以及核心政策研究員的接連出走,說明在 OpenAI 內部,偏向長遠、底層與治理維度的超前政策研究,正在迅速給短期商業化產品讓路。

從行業影響來看,這加速了關鍵安全人才向外部學術界、獨立智庫或監管機構的迴流。像 Miles Brundage 和 Rosie Campbell 這樣掌握一線模型前沿資料與風險評估經驗的人走向外部,也許反而能在第三方視角下推動更具公信力的外部監管,迫使各大模型廠商面對不可迴避的安全標準。

我們認為,Rosie 的告別信點出了 OpenAI 甚至整個前沿 AI 圈子眼下最大的隱患:當技術研發以驚人的加速度狂奔時,原本負責給列車裝剎車和訊號燈的團隊卻在逐漸邊緣化。商業利益推動著模型更快落地,但如果把變革性技術當成「普通消費級產品」來趕進度,現有的對齊與安全評估體系恐怕很快就會被更強大的系統穿透。這不僅是 OpenAI 一家的文化重塑,更是整個行業在安全治理上的危險偏航。

來源 (2)

  1. [1]
    @RosieCampbell(在新分頁開啟)原文twitter.com
  2. [2]

話題追蹤OpenAI 領導層危機

這個話題的歷次新聞,最新的在上面。

  1. OpenAI 政策研究員 Rosie 離職:AGI 準備團隊解散後難以為繼本則
  2. OpenAI 聯合創始人 Brockman 結束休假歸隊:將聚焦重大技術挑戰
  3. OpenAI 再失安全領軍人:研究副總裁 Lilian Weng 宣佈離職
  4. OpenAI 推進營利性轉型:已就重組與加州監管部門展開接洽
  5. OpenAI 完成 66 億美元新融資:投後估值達 1570 億美元

每日 AI 內容精選