기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.
결과 및 출력
온라인 평가 결과는 Amazon CloudWatch에 자동으로 저장됩니다. 기본적으로 서비스는 이를 전용 CloudWatch 로그 그룹에 JSON 로그 항목으로 기록합니다.
주제
로그 그룹 구조
기본 전용 대상을 사용하는 경우 서비스는 평가 결과를 /aws/bedrock-agentcore/evaluations/results/<online-evaluation-config-id>에 기록합니다. Amazon Bedrock AgentCore 콘솔의 해당 평가 세부 정보 페이지에서 구성에 대해 해결된 결과 로그 그룹을 볼 수 있습니다.
각 평가는이 로그 그룹 내에 별도의 로그 항목을 생성합니다. 또한 평가 점수는 모니터링 및 분석을 위한 CloudWatch 지표로 내보내집니다.
결과가 기록되는 위치 선택
resultDestination에서 outputConfig.cloudWatchConfig를 사용하여 온라인 평가 결과가 작성되는 위치를 선택합니다. 설정하지 않으면 서비스는 전용 로그 그룹을 사용합니다.
-
DEDICATED_LOG_GROUP(기본값) - 결과를 전용 결과 로그 그룹에 기록합니다. 를 설정하지 않으면 서비스가logGroupName를 사용합니다/aws/bedrock-agentcore/evaluations/results/<online-evaluation-config-id>. 다른 전용 로그 그룹을 사용하려면를 설정합니다logGroupName( 참조사용자 지정 출력 로그 그룹 사용). -
SOURCE_LOG_GROUP- 에이전트 추적을 제공한 동일한 로그 그룹에 결과를 다시 기록하므로 평가는 점수가 매겨진 추적과 함께 나타납니다. 이 값을 사용할logGroupName때는를 설정하지 마십시오.
사용자 지정 출력 로그 그룹 사용
resultDestination가 인 경우 선택한 로그 그룹에 결과를 보내logGroupName도록를 DEDICATED_LOG_GROUP설정할 수 있습니다. 로그 그룹이 이미 있는 경우 서비스는 이를 있는 그대로 사용합니다. 존재하지 않는 경우 서비스는 이를 생성하므로 평가 실행 역할은 해당 로그 그룹에 logs:CreateLogGroup 대해를 허용해야 합니다. 이름은이 구성의 자체 서비스 관리형 기본 그룹을 제외하고 예약된 /aws/bedrock-agentcore/evaluations/ 접두사를 사용할 수 없습니다.
# Write results back to the trace source log group outputConfig={"cloudWatchConfig": {"resultDestination": "SOURCE_LOG_GROUP"}} # Write results to a custom dedicated log group outputConfig={"cloudWatchConfig": {"resultDestination": "DEDICATED_LOG_GROUP", "logGroupName": "/my/team/evaluation-results"}}
사용자 지정 네임스페이스에 지표 게시
평가 점수도 CloudWatch 지표로 게시됩니다. 기본적으로 서비스는 Bedrock-AgentCore/Evaluations 네임스페이스를 사용합니다. 팀 또는 테넌트별로 결과를 구분하는 등 자체 네임스페이스 아래에 지표를 게시하려면 metricsNamespace에서를 설정합니다outputConfig.cloudWatchConfig. 값은 로 시작할 수 없습니다AWS/.
outputConfig={"cloudWatchConfig": {"metricsNamespace": "MyTeam/Evaluations"}}
결과 형식
평가 결과는 GenAI 평가 결과 이벤트에 대한 OpenTelemetry 의미 체계 규칙을 따릅니다. 가능한 경우 각 이벤트는 원래 스팬 ID로 상위 처리되며 원래 추적 ID와 세션 ID를 포함합니다.
CloudWatch Logs Insights를 사용하여 평가 결과를 쿼리 및 분석하고 CloudWatch 지표를 사용하여 시간 경과에 따른 평가 추세를 모니터링할 수 있습니다.
CloudWatch Observability Console에서 결과 보기
CloudWatch Observability Console을 사용하여 평가 결과를 보고 분석할 수 있습니다. 콘솔은 에이전트 평가에 대한 시각화, 지표 및 세부 로그를 제공합니다.
평가 결과를 보려면
-
https://console.aws.amazon.com/cloudwatch/
에서 CloudWatch 콘솔을 엽니다. -
탐색 창에서 GenAI Observability > Bedrock AgentCore를 선택합니다.
-
에이전트 섹션에서 평가 구성과 연결된 에이전트 및 엔드포인트를 선택합니다.
-
자세한 결과를 보려면 평가 탭으로 이동합니다.
자세한 내용은 AWS CloudWatch 세션 추적 평가 설명서를 참조하세요.
CloudWatch 지표에서 평가 점수 보기
평가 점수는 CloudWatch 지표로 게시됩니다. 기본적으로 Bedrock-AgentCore/Evaluations 네임스페이스에 표시됩니다. 를 설정한 경우 CloudWatch에서 지표를 검색할 때 대신 해당 사용자 지정 네임스페이스를 metricsNamespace찾습니다.
평가 점수를 보려면
-
https://console.aws.amazon.com/cloudwatch/
에서 CloudWatch 콘솔을 엽니다. -
탐색 창에서 지표 > 모든 지표를 선택합니다.
-
찾아보기 탭에서 Bedrock-AgentCore/Evaluations 또는에서 구성한 사용자 지정 네임스페이스를 선택합니다.
outputConfig.cloudWatchConfig.metricsNamespace -
차원 조합을 선택하여 선택적으로 평가자 유형 또는 평가 레이블별로 결과 범위를 좁힙니다.
자세한 내용은 AWS CloudWatch 세션 추적 평가 설명서를 참조하세요.