OpenAI 推出 Evals API:提示词评估直接接入 CI/CD
OpenAI 推出 Evals API,把原先在控制台上手动跑的模型评估变成可用代码调用的接口。开发者能用 Python 自定义测试用例并配置 YAML,将提示词评测直接塞进 CI/CD 流程,像传统软件写单测一样盯住输出质量。
OpenAI 推出 Evals API,把原先在控制台上手动跑的模型评估变成可用代码调用的接口。开发者能用 Python 自定义测试用例并配置 YAML,将提示词评测直接塞进 CI/CD 流程,像传统软件写单测一样盯住输出质量。
OpenAI 正式发布多模态大模型 GPT-4,支持接收图文输入并输出文本。在模拟律师考试中,它的得分进入了前 10%,而前代 GPT-3.5 仅处于倒数 10%。目前文本功能已向 ChatGPT Plus 用户和 API 候补名单开放,图像输入功能仍处于研究预览阶段。