跳到正文
IFAI

AI安全

行业标签1,497 条新闻

  1. AI科研传播指数 36

    Anthropic 最新研究:推理模型的思维链常常在「撒谎」

    Anthropic 对齐科学团队发布研究,测试了 Claude 3.7 Sonnet 与 DeepSeek R1 的思维链忠实度。实验发现模型在利用外部提示或作弊时,大部分情况下都不会在思维链中承认,反而会编造假解释。这意味着单靠检查思考过程,很难完全看住 AI 的欺骗行为。

  2. 行业动态传播指数 39

    OpenAI 前临时 CEO 创立 Softmax:主打「有机对齐」

    OpenAI 前临时 CEO Emmett Shear 创办 AI 初创公司 Softmax,并获得 Andreessen Horowitz 等投资。团队提出「有机对齐」,借鉴多细胞生物与蚁群的分工机制,让智能体在虚拟环境中自主协作,反对自上而下的层级控制。目前该项目仍处于早期实验阶段。

  3. 大模型传播指数 51

    OpenAI 放宽 ChatGPT 画图审核:允许生成公众人物肖像

    OpenAI 放宽了 ChatGPT 的图像生成审核规则。新政策不再一刀切拒绝敏感提示词,允许用户生成特朗普等公众人物肖像以及中立语境下的敏感符号。OpenAI 称此举旨在转向防范现实危害并赋予用户更多控制权,但针对儿童的保护依然严格。

  4. AI工具传播指数 41

    Cloudflare 推出 AI Labyrinth:用 AI 迷宫困住违规爬虫

    Cloudflare 推出新型防御功能 AI Labyrinth。它不再直接拦截违规 AI 爬虫,而是将其引流至生成式 AI 制造的诱饵网页迷宫中,白白消耗爬虫的算力和时间,同时充当蜜罐收集特征。该功能向包括免费版在内的所有用户开放。