跳到正文
IFAI

行业动态

OpenAI 宣布收购 Promptfoo:把安全测试与红队防御做进 Frontier

首次发布 传播指数 44

OpenAI 宣布将收购 AI 安全平台 Promptfoo。交易完成后,Promptfoo 的自动化安全与红队测试能力将直接整合进企业级平台 OpenAI Frontier,用于防范提示注入和越狱风险,同时继续维护开源项目。智能体安全正在加速变成大厂的原生基础设施。

OpenAI 宣布收购 Promptfoo:把安全测试与红队防御做进 Frontier
图:openai.com

给 AI 智能体放开系统权限和内部数据听起来很美,但企业心里其实一直在打鼓。只要被几句恶意提示词忽悠瘸了,或者把敏感数据当普通文本吐出来,灾难就来了。

为了让企业敢把重要工作交给 AI 同事,OpenAI 决定把最懂怎么给 AI 找茬的团队直接买下来。

OpenAI 宣布收购 AI 安全与评估平台 Promptfoo。这笔交易达成后,Promptfoo 的技术将直接集成到 OpenAI Frontier 中,也就是 OpenAI 专门用来构建和运行企业级 AI 同事的平台上。

把红队测试塞进开发流程

Promptfoo 由 Ian Webster 和 Michael D'Angelo 创办。根据官方数据,财富 500 强企业中已经有超过 25% 在使用他们的工具。

他们不仅在企业级市场站稳了脚跟,旗下的开源命令行工具和代码库也是很多开发者做大模型评测和红队打靶的首选。

OpenAI 表示,收购完成后会继续维护和建设 Promptfoo 的开源项目,同时把它的企业级能力深度融入 Frontier。

融入之后,Frontier 会把自动化安全测试与红队演练变成平台原生功能。平台能直接帮助企业识别提示词注入、越狱、数据泄露、工具滥用以及越界行为。

此外,Frontier 还会提供内置的报告与追溯工具,帮企业记录测试过程、监控长期变化,以满足越来越严格的 AI 治理和合规审计要求。

为什么重要

我们认为,OpenAI 这笔收购切中的是企业级 Agent 落地最痛的一根神经。

现在的企业不缺聪明的模型,缺的是敢让模型上岗的底气。过去开发者做 AI 安全测试往往要在外部拼凑一套工具,安全和业务开发是割裂的两张皮。把红队测试直接做进 Frontier 之后,企业在搭建工作流的早期就能自动跑测试,省去了很多外部采购和磨合的成本。

从行业竞争来看,这一步走得相当务实。当对手们还在拼推理速度和基准测试分数时,OpenAI 已经开始补齐合规、审计和安全防御这些脏活累活,把护城河筑在企业级服务的基础设施上。

不过这里也存在一个潜在的隐患。企业让 OpenAI 的内部工具来审查跑在 OpenAI 平台上的 AI,相当于让平台既当运动员又当裁判员。那些对安全要求极高的大型机构,未来很可能依然会保留独立的第三方审查机制。

开源社区也难免会有疑虑。虽然官方承诺继续支持开源项目,但团队的核心精力大概率会向 Frontier 倾斜,开源版本后续能不能保持原汁原味的迭代速度,还需要继续观察。

来源 (1)

  1. [1]
    openai.com(在新标签页打开)原文openai.com

每日 AI 内容精选