OpenAIがEvals APIを公開、プロンプト評価とテストを自動化
OpenAIはプロンプトやモデル出力の評価をコードから自動実行できる「Evals API」を公開した。従来ダッシュボード上で行っていた検証をPythonスクリプトやYAMLで定義でき、CI/CDパイプラインに組み込んで単体テスト感覚で品質を管理できる。
OpenAIはプロンプトやモデル出力の評価をコードから自動実行できる「Evals API」を公開した。従来ダッシュボード上で行っていた検証をPythonスクリプトやYAMLで定義でき、CI/CDパイプラインに組み込んで単体テスト感覚で品質を管理できる。