Anthropic 釋出 Claude 3 Haiku:每秒讀 30 頁,成本僅為同類一半
Anthropic 推出 Claude 3 Haiku,主打高速與極低成本。其針對 32K 以下提示詞的處理速度達每秒 2.1 萬 token(約 30 頁),比同類模型快 3 倍,企業分析長文件成本減半,花 1 美元就能處理 400 起訴訟案或 2500 張圖片。目前已上線 API 與 Claude Pro。
GPT、Claude、Gemini、DeepSeek、通義千問等大模型的新版本釋出、跑分對比、價格和 API 變化,每天更新。
Anthropic 推出 Claude 3 Haiku,主打高速與極低成本。其針對 32K 以下提示詞的處理速度達每秒 2.1 萬 token(約 30 頁),比同類模型快 3 倍,企業分析長文件成本減半,花 1 美元就能處理 400 起訴訟案或 2500 張圖片。目前已上線 API 與 Claude Pro。
OpenAI 網頁團隊疑似提前洩露 GPT-4.5 Turbo 產品頁,被搜尋引擎收錄。預熱文案顯示其擁有 256,000 token(約 20 萬詞)上下文視窗,知識庫更新至 2024 年 6 月,暗示新模型或於 6 月正式上線。不過目前相關連結顯示為 404 頁面。
據報道,Inflection 推出新底座模型 Inflection-2.5。官方稱其效能逼近 GPT-4,而訓練算力僅用了約 40%。這意味著繼 Claude 3 與 Gemini 1.5 之後,GPT-4 的壁壘再次被打破,頂尖大模型的訓練門檻正在快速下降。
Anthropic 正式推出 Claude 3 系列模型,分為 Haiku、Sonnet 與 Opus 三款。最強型號 Opus 在多項基準測試中超越競品,全系支援視覺輸入與 200K 上下文。這意味著大模型競爭進入新階段。目前 Opus 和 Sonnet 已上線,Haiku 即將推出。
Google 旗下 DeepMind 創始人 Demis Hassabis 表示,此前因歷史偏頗下線的 Gemini 人物畫圖功能將在未來幾週內恢復。他解釋稱原本追求多樣性的初衷是好的,但在歷史場景應用時過於一刀切,目前正重新微調限制。
Microsoft 宣佈與 Mistral AI 達成多年合作,率先在 Azure AI 上線其旗艦模型 Mistral Large。微軟將為其提供超算算力,企業可通過 MaaS 模式直接呼叫。這意味著微軟在 OpenAI 之外,正式將歐洲最強模型納入雲生態。
剛離開 OpenAI 的 Andrej Karpathy 釋出兩小時影片教程,教開發者從零構建 GPT 分詞器。影片還深入剖析了大模型翻車的原因,比如為什麼反轉不了字串、算術總算不準,甚至順帶解釋了為什麼喂資料時 YAML 會比 JSON 更省 token。
Google 推出下一代模型 Gemini 1.5,首發中型模型 1.5 Pro 採用 MoE 架構,效能比肩 1.0 Ultra 且更省算力。最狠的是支援最高 100 萬 token 上下文,能一口氣塞進 1 小時影片或 3 萬行程式碼。目前已面向部分開發者和企業開啟有限預覽。
Google 宣佈將聊天機器人 Bard 更名為 Gemini,並推出搭載旗艦模型 Ultra 1.0 的 Gemini Advanced。新模型擅長複雜推理、程式設計與個性化協作,使用者可通過 Google One AI Premium 訂閱使用,獨立的 Android 應用也同步上線。
據曝光的更新日誌顯示,Google 計劃將聊天機器人 Bard 更名為 Gemini,並推出搭載 Gemini Ultra 模型的付費版「Gemini Advanced」。該版本強化了多模態與程式碼分析能力,還將推出獨立手機應用,但目前官方尚未正式確認。
Meta 釋出程式碼生成模型 Code Llama 70B,包含基礎版、指令微調版及 Python 專版。該模型基於 5000 億 token 程式碼訓練,支援 10 萬 token 上下文視窗,沿用先前的開源許可協議,允許學術和商業免費微調與使用。
OpenAI 推出兩款新嵌入模型 text-embedding-3-small 與 large,支援靈活縮短維度以降低儲存成本,小模型價格降至上一代的五分之一。同時,GPT-3.5 Turbo 輸入價格降低 50%,更新版 GPT-4 Turbo 預覽版也上線並改善了程式碼生成偷懶問題。
Meta 扎克伯格宣佈正在訓練下一代大模型 Llama 3,重點補齊程式碼生成、推理與規劃能力。為了打造通用人工智慧(AGI),Meta 預計在年底前囤積超 34 萬張輝達 H100 晶片,總算力摺合近 60 萬張 H100,並調整架構讓前沿科研更直接對接數十億產品使用者。
12 月,多位使用者曬出截圖,顯示 ChatGPT 自稱執行在「gpt-4.5-turbo」模型上,引發秘密上線的猜測。OpenAI 員工和 CEO Sam Altman 隨後迅速否認,明確表示沒有 GPT-4.5 悄悄釋出,這只是模型一次奇特且偶發一致的幻覺。
Google 正式向開發者與企業開放 Gemini Pro 和多模態介面 Gemini Pro Vision。模型支援 32K 文本上下文、函式呼叫與 38 種語言。開發者可通過 Google AI Studio 免費呼叫,每分鐘上限 60 次請求;企業使用者則可在 Vertex AI 上定製微調。
Microsoft 正式釋出 27 億引數語言模型 Phi-2。該模型依靠「教科書級」高質量資料和知識繼承,在程式碼與數學等多步推理任務上超越了體量大其 25 倍的 Llama-2-70B。小尺寸模型也能展現湧現能力,便於研究人員探索模型機理與微調。
Meta 開放音訊生成基礎研究模型 Audiobox 的試用 Demo。該模型支援零樣本語音合成(Zero shot TTS)、文本生成音效以及音訊修復填充(Infilling)等能力,現在即可直接線上體驗。
YouTuber Greg Technology 用 GPT-4V 復現了 Google 宣傳片中被質疑剪輯造假的 Gemini 演示。他自制工具讓 GPT-4 即時識別手勢、畫作和玩猜拳,不僅全程即時執行,還把程式碼開源到了 GitHub 供人自測。
安全測試員曝光 xAI 旗下大模型 Grok 在拒絕回答時,竟回覆稱「違反了 OpenAI 的使用政策」。xAI 員工解釋稱是網路訓練資料意外抓取了 ChatGPT 內容,但專家懷疑其實際上使用了 OpenAI 的生成資料進行微調。
Elon Musk 宣佈旗下 xAI 開發的聊天機器人 Grok 正式上線。該模型基於 Grok-1,主打幽默與反叛風格的回答,目前專供社交平臺 X 的 Premium+ 訂閱會員使用,也是 X 轉向訂閱制與超級應用的關鍵一步。