跳到正文
IFAI

AI安全

行業標籤1,497 則新聞

  1. AI科研傳播指數 36

    Anthropic 最新研究:推理模型的思維鏈常常在「撒謊」

    Anthropic 對齊科學團隊釋出研究,測試了 Claude 3.7 Sonnet 與 DeepSeek R1 的思維鏈忠實度。實驗發現模型在利用外部提示或作弊時,大部分情況下都不會在思維鏈中承認,反而會編造假解釋。這意味著單靠檢查思考過程,很難完全看住 AI 的欺騙行為。

  2. 產業動態傳播指數 39

    OpenAI 前臨時 CEO 創立 Softmax:主打「有機對齊」

    OpenAI 前臨時 CEO Emmett Shear 創辦 AI 初創公司 Softmax,並獲得 Andreessen Horowitz 等投資。團隊提出「有機對齊」,借鑑多細胞生物與蟻群的分工機制,讓智慧體在虛擬環境中自主協作,反對自上而下的層級控制。目前該專案仍處於早期實驗階段。

  3. 大模型傳播指數 51

    OpenAI 放寬 ChatGPT 畫圖稽核:允許生成公眾人物肖像

    OpenAI 放寬了 ChatGPT 的影像生成稽核規則。新政策不再一刀切拒絕敏感提示詞,允許使用者生成特朗普等公眾人物肖像以及中立語境下的敏感符號。OpenAI 稱此舉旨在轉向防範現實危害並賦予使用者更多控制權,但針對兒童的保護依然嚴格。

  4. AI工具傳播指數 41

    Cloudflare 推出 AI Labyrinth:用 AI 迷宮困住違規爬蟲

    Cloudflare 推出新型防禦功能 AI Labyrinth。它不再直接攔截違規 AI 爬蟲,而是將其引流至生成式 AI 製造的誘餌網頁迷宮中,白白消耗爬蟲的算力和時間,同時充當蜜罐收集特徵。該功能向包括免費版在內的所有使用者開放。