#オンライン評価

「オンライン評価」に関する記事一覧。Kuu株式会社のブログでは、AIエージェントガバナンスとDXの観点からオンライン評価に関連するノウハウを 1 件発信しています。

AIエージェント本番評価——シャドーモードとサンプリング

本番トラフィックを直接評価に使うシャドーモードとサンプリング戦略を解説。LLMジャッジを全量の5〜10%に抑えながら品質劣化を継続検知し、本番データをゴールデンデータセットに変えるフィードバックループ設計を示す。