#llm-testing
タグ「llm-testing」に分類された、合計 3 件の記事を掲載しています。
Promptfooでプロンプトのデグレを防ぐ:CI回帰テストと評価基準
プロンプト改修による予期せぬ出力崩れを防ぐため、Promptfooを用いたCI回帰テストの構築法を解説。決定論的検証とLLM-as-a-Judgeの使い分け、GitHub Actionsでのコスト管理とPR連携まで網羅します。
エージェント型LLMアプリのテスト戦略:再現性と品質を両立させる
エージェント型LLMアプリの非決定性に対応するテスト設計を解説。temperature制御、サンプリングテスト、セマンティックアサーションなど、実践的なアプローチを紹介します。