結果と出力
オンライン評価の結果は自動的に Amazon CloudWatch に保存されます。オンライン評価設定を作成すると、サービスは評価結果を JSON 形式で保存する専用の CloudWatch ロググループを作成します。
ロググループ構造
評価結果は、 形式の CloudWatch /aws/bedrock-agentcore/evaluations/results/<online-evaluation-config-id> ロググループに保存されます。ロググループは、Amazon Bedrock AgentCore コンソールの評価設定の詳細ページで表示できます。
各評価では、このロググループ内に個別のログエントリが生成されます。さらに、評価スコアはモニタリングと分析のための CloudWatch メトリクスとして出力されます。
結果形式
評価結果は、GenAI 評価結果イベントの OpenTelemetry セマンティック規則に従います。イベントは、可能であれば元のスパン ID に親付けられ、元のトレース ID とセッション ID を参照します。
CloudWatch Logs Insights を使用して評価結果をクエリおよび分析し、CloudWatch Metrics を使用して評価傾向を経時的にモニタリングできます。
CloudWatch Observability Console での結果の表示
CloudWatch Observability Console を使用して、評価結果を表示および分析できます。コンソールには、エージェント評価の視覚化、メトリクス、詳細ログが表示されます。
評価結果を表示するには
-
CloudWatch コンソール (https://console.aws.amazon.com/cloudwatch/
) を開きます。 -
ナビゲーションペインで、GenAI Observability > Bedrock AgentCore を選択します。
-
エージェントセクションで、評価設定に関連付けられたエージェントとエンドポイントを選択します。
-
評価タブに移動して詳細な結果を表示する
詳細については、AWS CloudWatch セッショントレース評価ドキュメント」を参照してください。
CloudWatch メトリクスでの評価スコアの表示
評価スコアは CloudWatch メトリクスとして発行されます。CloudWatch Metrics コンソールで直接表示できます。
評価スコアを表示するには
-
CloudWatch コンソール (https://console.aws.amazon.com/cloudwatch/
) を開きます。 -
ナビゲーションペインで、メトリクス > すべてのメトリクスを選択します。
-
参照タブで、Bedrock-AgentCore/Evaluations を選択します。
-
ディメンションの組み合わせを選択して、必要に応じて評価者タイプまたは評価ラベルで結果を絞り込む
詳細については、AWS CloudWatch セッショントレース評価ドキュメント」を参照してください。
