Ergebnisse und Output
Die Ergebnisse der Online-Bewertung werden automatisch auf Amazon gespeichert CloudWatch. Wenn Sie eine Konfiguration für die Online-Evaluierung erstellen, erstellt der Service eine spezielle CloudWatch Protokollgruppe, in der Ihre Bewertungsergebnisse im JSON-Format gespeichert werden.
Themen
Struktur der Protokollgruppe
Die Auswertungsergebnisse werden in einer CloudWatch Protokollgruppe mit dem folgenden Format gespeichert/aws/bedrock-agentcore/evaluations/results/<online-evaluation-config-id>. Die Protokollgruppe kann auf der Seite mit den Details zur Testkonfiguration in der Amazon AgentCore Bedrock-Konsole eingesehen werden.
Jede Auswertung generiert einen separaten Protokolleintrag innerhalb dieser Protokollgruppe. Darüber hinaus werden Bewertungsergebnisse als CloudWatch Metriken für die Überwachung und Analyse ausgegeben.
Format der Ergebnisse
Die Evaluationsergebnisse folgen den OpenTelemetry semantischen Konventionen für Ereignisse mit GenAI-Bewertungsergebnissen. Die Ereignisse werden, wenn möglich, der ursprünglichen Span-ID übergeordnet und enthalten Verweise auf die ursprüngliche Trace-ID und die Session-ID.
Sie können CloudWatch Logs Insights verwenden, um Ihre Bewertungsergebnisse abzufragen und zu analysieren, und CloudWatch Metrics, um Bewertungstrends im Laufe der Zeit zu überwachen.
Ergebnisse in der CloudWatch Observability Console anzeigen
Sie können Ihre Bewertungsergebnisse mit der CloudWatch Observability Console anzeigen und analysieren. Die Konsole bietet Visualisierungen, Metriken und detaillierte Protokolle Ihrer Agentenbewertungen.
Um die Evaluierungsergebnisse anzuzeigen
-
Öffnen Sie die CloudWatch Konsole unter https://console.aws.amazon.com/cloudwatch/
-
Wählen Sie im Navigationsbereich GenAI Observability > Bedrock AgentCore
-
Wählen Sie im Abschnitt Agents den Agenten und den Endpunkt aus, die Ihrer Testkonfiguration zugeordnet sind
-
Rufen Sie den Tab Evaluationen auf, um detaillierte Ergebnisse zu erhalten
Weitere Informationen finden Sie in der Dokumentation zu AWS CloudWatch Session-Trace-Evaluierungen.
Bewertungsergebnisse in CloudWatch Metrics anzeigen
Bewertungsergebnisse werden als CloudWatch Kennzahlen veröffentlicht. Sie können sie direkt in der CloudWatch Metrics-Konsole einsehen.
Um die Bewertungsergebnisse einzusehen
-
Öffnen Sie die CloudWatch Konsole unter https://console.aws.amazon.com/cloudwatch/
-
Wählen Sie im Navigationsbereich Metriken > Alle Metriken
-
Wählen Sie auf der Registerkarte „Durchsuchen“ Bedrock-AgentCore/Evaluations
-
Wählen Sie Dimensionskombinationen aus, um die Ergebnisse optional nach Evaluatortyp oder Bewertungslabel einzugrenzen
Weitere Informationen finden Sie in der Dokumentation zu AWS CloudWatch Session-Trace-Evaluierungen.
