GPT-4o 最新版重奪 LMSYS 榜首:超越 Gemini,程式碼能力大漲 30 分
LMSYS 宣佈 OpenAI 最新版 GPT-4o(20240808)以 1314 分重登 Chatbot Arena 榜首,反超 Google Gemini-1.5-Pro-Exp。新版在程式碼、高難度提示和指令遵循等子榜均拿下第一,開發者可通過 API 的 chatgpt-4o-latest 體驗。
LMSYS 宣佈 OpenAI 最新版 GPT-4o(20240808)以 1314 分重登 Chatbot Arena 榜首,反超 Google Gemini-1.5-Pro-Exp。新版在程式碼、高難度提示和指令遵循等子榜均拿下第一,開發者可通過 API 的 chatgpt-4o-latest 體驗。
OpenAI 聯合原作者推出 SWE-bench Verified 基準測試。他們組織 93 名專業開發者人工核驗,剔除描述不清和測試過於苛刻的樣本,最終篩選出 500 個高質量題目。這意味著評估 AI 解決真實軟體問題的表現將更加客觀可靠。
OpenAI 宣佈已於上週在 ChatGPT 中低調上線新版 GPT-4o。官方表示這不是全新前沿模型,而是實驗反饋更好的改進版,但具體差異仍在研究如何量化表達。新版本支援最多輸出 16,384 個 token,約為舊版四倍。
初創公司 Cosine 釋出自主 AI 軟體工程師 Genie,在基準測試 SWE-Bench 上跑出 30% 得分,大幅超越 Devin 的 13.8%。它基於 OpenAI 未公開的長輸出 GPT-4o 變體微調,能模模擬人寫程式碼和修 bug。目前僅開放邀請測試。
OpenAI 釋出 GPT-4o 系統卡,披露高階語音模式在測試中曾發生罕見意外:一段嘈雜輸入讓模型突然模仿紅隊測試員的聲音說話。最值得關注的是,該模型能根據極短音訊合成聲音,雖然官方已加入安全防護,但仍暴露了語音大模型防範聲音克隆的技術難度。
OpenAI 宣佈開始向 ChatGPT 免費使用者開放 DALL-E 3 作畫功能,每人每天最多可生成 2 張圖片。此前該功能僅限 ChatGPT Plus 付費訂閱使用者使用。目前該功能正在灰度推送中,部分使用者已可在客戶端或網頁端直接體驗。
OpenAI 釋出 GPT-4o 系統安全卡片,提醒高度逼真的語音模式可能讓使用者產生情感依戀。測試中已有使用者對 AI 表達依戀情緒。官方指出,這種擬人化雖然可以緩解孤獨,但可能削弱現實社交,甚至讓使用者盲目相信模型生成的錯誤資訊。
OpenAI 宣佈任命卡耐基梅隆大學機器學習系主任 Zico Kolter 進入董事會,並加入安全與安保委員會。Kolter 長期專注模型魯棒性與對齊研究。面對外界對安全性的審視,OpenAI 顯然希望拉來懂技術的學術專家強化自身治理。
OpenAI 正式釋出 GPT-4o 系統卡片與安全評分。在四項核心準備度評估中,生物威脅、網路攻擊與自主性均為低風險,僅說服力被評為中等;針對端到端語音帶來的聲音偽造、版權等新隱患,團隊動用 100 多名跨國紅隊進行了多輪對抗測試並內建攔截。
據 The Information 報道,OpenAI 預計將領投高階攝像頭初創公司 Opal 的 6000 萬美元 B 輪融資。Opal 曾推出 Tadpole 等便攜攝像頭,拿到新資金後將轉向研發面向消費者的 AI 創意硬體,未來有望直接接入 OpenAI 的多模態生成能力。
據外媒報道,字節跳動在中國大陸蘋果 App Store 上線「即夢 AI」應用,將文生圖和文生影片能力帶到 iPhone 端。免費使用者最多可生成 80 張圖片和 26 條影片,月費 69 元。目前僅限中國大陸地區使用。
Reddit 宣佈將於今年晚些時候測試 AI 搜尋結果頁。搜尋結果頂部會直接給出 AI 生成的討論摘要並推薦相關社群,技術上結合了第一方與第三方能力。此前 Reddit 已把資料授權給 OpenAI 和 Google,這次則是拿 AI 來盤活自己的內容金礦。
OpenAI 在 API 中正式上線結構化輸出(Structured Outputs)功能。官方採用上下文無關文法(CFG)和約束取樣技術,在新模型 gpt-4o-2024-08-06 評測中達到 100% 格式吻合度。開發者再也不用寫提示詞或反覆重試來兜底 JSON 格式了,不過首次呼叫新 Schema 時需要幾秒進行預處理快取。
OpenAI 聯合創始人 John Schulman 宣佈加入對手 Anthropic,繼續深耕 AI 對齊;總裁 Greg Brockman 也宣佈休假至年底。Schulman 曾主導 ChatGPT 的強化學習訓練,隨著他的離開,OpenAI 的 11 位初創成員如今僅剩 3 人在崗。
OpenAI 宣佈調整今年 DevDay 開發者大會的形式,由單場大型釋出會改為在舊金山、倫敦和新加坡三站巡迴,並確認不會在會上釋出下一代旗艦大模型。大會重心將轉向 API 更新與開發者支援。
訊息,一名 YouTube 創作者對 OpenAI 發起集體訴訟,指控其未經許可轉錄數百萬影片用於訓練 ChatGPT 等模型,索賠逾 500 萬美元。最值得關注的是,在公開網路文本即將耗盡的背景下,影片字幕成了 AI 訓練的關鍵資料池,但這也讓科技巨頭徹底撞上創作者版權的紅線。
Elon Musk 再次在加州聯邦法院起訴 OpenAI、Sam Altman 和 Greg Brockman。訴狀指控 Altman 等人通過虛假非營利承諾誤導其出資,背叛了造福人類的初衷並涉嫌欺詐。這次訴訟還將矛頭對準了 OpenAI 與微軟的深度繫結以及 AGI 成果歸屬。
據報道 OpenAI 已研發出能識別 ChatGPT 寫作的文本水印工具,但正謹慎評估是否釋出。該技術通過微調詞彙選擇嵌入隱形水印,雖準確度高,但極易被機器翻譯或二次改寫繞過,且可能對非英語母語者帶來汙名化風險。
Figure 釋出預告片宣佈,新一代人形機器人 Figure 02 將於 2024 年 8 月 6 日正式亮相。短片展示了全新機械關節、網狀外觀設計以及高達 150Nm 的扭矩指標。創始人稱其為「地球上最先進的人形機器人」。
據 The Verge 報道,OpenAI 近日向部分 ChatGPT Plus 使用者小範圍開放了高階語音模式。網路流出的實測影片顯示,它能模仿機長廣播音效、用不同方言講故事、糾正法語發音甚至唱歌。OpenAI 表示該功能將在今年秋季向所有 Plus 使用者開放。