探測 o1 推理過程或被封號:OpenAI 發警告信嚴守「思維鏈」
OpenAI 自上週推出具備推理能力的 o1 模型後,開始向試圖窺探其隱藏思維鏈的使用者傳送警告信甚至威脅封號。o1 在介面中只展示經二道過濾的思考總結,不少使用者和安全研究員嘗試用提示詞注入套取真實過程,甚至輸入「reasoning trace」一詞就會觸發違規警告。
OpenAI 自上週推出具備推理能力的 o1 模型後,開始向試圖窺探其隱藏思維鏈的使用者傳送警告信甚至威脅封號。o1 在介面中只展示經二道過濾的思考總結,不少使用者和安全研究員嘗試用提示詞注入套取真實過程,甚至輸入「reasoning trace」一詞就會觸發違規警告。
OpenAI 宣佈將安全與安保委員會轉為獨立的董事會監督委員會,由卡內基梅隆大學的 Zico Kolter 擔任主席。該委員會擁有在安全顧慮解決前推遲模型釋出的權力,相當於給前沿模型釋出設定了獨立的剎車機制。
據 Fortune 報道,Sam Altman 在員工週會上透露,OpenAI 計劃在 2025 年擺脫非營利實體的控制,轉向傳統營利性架構。目前其營利業務受非營利母公司監管且設有利潤上限,有訊息稱投資者要求取消上限以促成新一輪融資。不過官方回應稱非營利部門仍將保留。
週四,OpenAI 宣佈 ChatGPT 周活躍使用者達到 2 億,相比去年 11 月的 1 億翻了一倍。官方將增長歸功於 GPT-4o 上線以及將文件分析等 Plus 功能下放給免費使用者。此外,自 7 月釋出 GPT-4o mini 以來其 API 用量也已翻倍,92% 的財富 500 強企業正在使用其產品。
Plaud 推出可穿戴 AI 裝置 NotePin。與試圖取代手機的 Humane 不同,它只做一件事:記筆記。裝置可作為項鍊、手環或胸針佩戴,錄音後由 OpenAI 的 GPT-4o 整理轉寫。功能做減法,反而讓 AI 硬體看著更靠譜了。
週四,美國 AI 安全研究所宣佈與 OpenAI、Anthropic 簽署備忘錄,兩家公司同意在主要新模型釋出前後向該機構開放訪問許可權,以協助評估風險與提出改進建議。此舉正值美國探討 AI 監管邊界之際,此前兩家公司曾對加州 SB 1047 安全法案表達顧慮。
據 Variety 報道,奧普拉將主持 ABC 黃金檔特別節目《AI and the Future of Us》,定於 9 月 12 日播出。節目將對話 OpenAI CEO 奧特曼、比爾·蓋茨和博主 Marques Brownlee 等人,用通俗語言拆解 AI 對普通人日常生活、就業及教育的衝擊。
據《華爾街日報》報道,Apple 正洽談參與 OpenAI 新一輪融資,該輪融資對 OpenAI 的估值超過 1000 億美元。Thrive Capital 擬領投 10 億美元,Microsoft 也在洽談跟投。兩家此前已敲定在 iOS 18 中整合 ChatGPT,這一步若落地將直接把商業合作綁成資本同盟。
加州備受爭議的 AI 安全法案 SB 1047 已在州立法機構通過,正等待州長簽署生效。該法案要求超大模型開發者建立並記錄防範重大危害的安全保障機制。此前馬斯克出人意料公開表態支援,而 OpenAI 則明確表示反對。
據 The Information 報道,OpenAI 正研發專注邏輯推理的代號模型 Strawberry,擅長數學和程式設計,並已向美國國家安全官員展示。最值得關注的是,Strawberry 不僅有望最快今秋整合進 ChatGPT,還在負責生成高質量合成數據,用於訓練下一代旗艦模型 Orion。
Elon Musk 在 X 上公開支援加州 SB 1047 安全法案。該法案強制大模型廠商防範嚴重危害,即便旗下 xAI 也會被波及。最值得關注的是,老對手 OpenAI 剛剛表態反對,Musk 卻認為這是一項艱難但必要的決定,並強調自己主張 AI 監管已有 20 多年。
上週,有愛好者在測試影像生成模型 Flux 時發現,通過訓練 LoRA 可以在生成的畫面中精準復現自定義字型。相比此前模型動輒把英文畫成亂碼,Flux 擅長渲染場景文字,讓使用者能在黑板招牌或名片上塞進指定字型。不過生成時偶爾仍會出現字母拼寫偏差。
OpenAI、Adobe 與微軟表態支援加州 AB 3211 法案。該法案不僅要求在 AI 生成的音影片和圖片後設資料中嵌入水印,還強制 Instagram、X 等大型平臺必須用普通人看得懂的方式明確標註 AI 內容。此前曾以「負擔過重」反對的科技巨頭,在法案修正後集體倒戈支援。
OpenAI 披露亞利桑那州立大學(ASU)接入 ChatGPT Edu 的進展。全校收到超 400 份提案並已啟動 200 多個專案,覆蓋學術寫作輔助、模擬醫患對話等場景。學校強調通過教育專版確保學生隱私與研究資料安全。
OpenAI 致信加州議員及州長,正式表態反對加州爭議極大的 AI 監管法案 SB 1047。公司認為該法案會減緩創新節奏、逼迫頂尖人才遷出加州,呼籲通過聯邦法規統一監管。提案議員則反駁稱這一指責「毫無道理」。
OpenAI 宣佈與出版巨頭康泰納仕達成合作,將在 ChatGPT 和 SearchGPT 中直接展示《Vogue》《紐約客》《連線》等刊物內容。回答將附帶原文直鏈,也是 OpenAI 擴充搜尋信源與內容授權的關鍵一步。
OpenAI 宣佈面向所有付費開發者開放 GPT-4o 微調功能。開發者只需幾十條樣本就能定製響應格式與行業特定語氣,訓練費用為每百萬 token 25 美元。9 月 23 日前,每個組織每天還能獲贈 100 萬免費訓練 token。
美國懷俄明州夏延市長候選人 Victor Miller 承諾,若勝選將讓定製 ChatGPT「Vic」100% 獨立決策,自己僅負責簽字執行。州選舉官員已裁定 AI 無權列入選票,OpenAI 也曾封禁其賬號,但他仍堅持以人機混合模式參選。
OpenAI 封禁了一批關聯伊朗秘密行動 Storm-2035 的 ChatGPT 賬號。該團隊利用 AI 生成假新聞和社媒評論試圖干預美國大選與輿論。不過監測顯示其帖子互動寥寥,幾乎沒有真實受眾買賬。
據報道,OpenAI 已在 ChatGPT 中上線 GPT-4o 更新版本並重奪 Chatbot Arena 榜首。官方坦言很難細緻量化模型行為變化,僅表示是基於使用者反饋增刪資料與常規迭代,同時將最大輸出擴充套件至 16,384 token。