Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.
Hasil dan keluaran
Hasil evaluasi online secara otomatis disimpan ke Amazon CloudWatch. Secara default, layanan menulisnya sebagai entri log JSON ke grup CloudWatch log khusus.
Topik
Struktur grup log
Jika Anda menggunakan tujuan khusus default, layanan menulis hasil evaluasi ke/aws/bedrock-agentcore/evaluations/results/<online-evaluation-config-id>. Anda dapat melihat grup log hasil yang diselesaikan untuk konfigurasi di halaman detail evaluasi tersebut di AgentCore konsol Amazon Bedrock.
Setiap evaluasi menghasilkan entri log terpisah dalam grup log ini. Selain itu, skor evaluasi dipancarkan sebagai CloudWatch metrik untuk pemantauan dan analisis.
Pilih di mana hasil ditulis
Gunakan resultDestination outputConfig.cloudWatchConfig untuk memilih di mana hasil evaluasi online ditulis. Jika Anda tidak menyetelnya, layanan menggunakan grup log khusus:
-
DEDICATED_LOG_GROUP(default) — Menulis hasil ke grup log hasil khusus. Jika Anda tidak menyetlogGroupNameel, layanan menggunakan/aws/bedrock-agentcore/evaluations/results/<online-evaluation-config-id>. Untuk menggunakan grup log khusus yang berbeda, setellogGroupName(lihatMenggunakan grup log keluaran khusus). -
SOURCE_LOG_GROUP— Menulis hasil kembali ke grup log yang sama yang menyediakan jejak agen, sehingga evaluasi muncul di samping jejak yang mereka nilai. Jangan mengaturlogGroupNamesaat Anda menggunakan nilai ini.
Menggunakan grup log keluaran khusus
resultDestinationKapanDEDICATED_LOG_GROUP, Anda dapat mengatur logGroupName untuk mengirim hasil ke grup log yang Anda pilih. Jika grup log sudah ada, layanan menggunakannya apa adanya. Jika tidak ada, layanan membuatnya, jadi peran eksekusi evaluasi harus mengizinkan logs:CreateLogGroup grup log tersebut. Nama tidak dapat menggunakan awalan yang dicad /aws/bedrock-agentcore/evaluations/ angkan, kecuali untuk grup default yang dikelola layanan konfigurasi ini sendiri.
# Write results back to the trace source log group outputConfig={"cloudWatchConfig": {"resultDestination": "SOURCE_LOG_GROUP"}} # Write results to a custom dedicated log group outputConfig={"cloudWatchConfig": {"resultDestination": "DEDICATED_LOG_GROUP", "logGroupName": "/my/team/evaluation-results"}}
Publikasikan metrik ke namespace kustom
Skor evaluasi juga dipublikasikan sebagai CloudWatch metrik. Secara default, layanan menggunakan Bedrock-AgentCore/Evaluations namespace. Untuk mempublikasikan metrik di bawah namespace Anda sendiri, misalnya untuk memisahkan hasil berdasarkan tim atau penyewa, aturmetricsNamespace. outputConfig.cloudWatchConfig Nilai tidak bisa dimulai denganAWS/.
outputConfig={"cloudWatchConfig": {"metricsNamespace": "MyTeam/Evaluations"}}
Format hasil
Hasil evaluasi mengikuti konvensi OpenTelemetry semantik untuk peristiwa hasil evaluasi GenAI. Jika memungkinkan, setiap peristiwa diturunkan ke ID rentang asli dan menyertakan ID jejak asli dan ID sesi.
Anda dapat menggunakan CloudWatch Logs Insights untuk menanyakan dan menganalisis hasil evaluasi Anda, dan CloudWatch Metrik untuk memantau tren evaluasi dari waktu ke waktu.
Melihat hasil di CloudWatch Observability Console
Anda dapat melihat dan menganalisis hasil evaluasi menggunakan Konsol CloudWatch Observabilitas. Konsol menyediakan visualisasi, metrik, dan log terperinci dari evaluasi agen Anda.
Untuk melihat hasil evaluasi
-
Buka CloudWatch konsol di https://console.aws.amazon.com/cloudwatch/
-
Di panel navigasi, pilih GenAI Observability > Bedrock AgentCore
-
Di bawah bagian Agen, pilih agen dan titik akhir yang terkait dengan konfigurasi evaluasi Anda
-
Arahkan ke tab Evaluasi untuk hasil terperinci
Untuk detail selengkapnya, lihat dokumentasi evaluasi pelacakan AWS CloudWatch sesi.
Melihat skor evaluasi di CloudWatch Metrik
Skor evaluasi dipublikasikan sebagai CloudWatch metrik. Secara default, mereka muncul di Bedrock-AgentCore/Evaluations namespace. Jika Anda menyetelmetricsNamespace, carilah namespace kustom itu saat Anda menelusuri metrik di CloudWatch.
Untuk melihat skor evaluasi
-
Buka CloudWatch konsol di https://console.aws.amazon.com/cloudwatch/
-
Di panel navigasi, pilih Metrik > Semua Metrik
-
Di tab Browse, pilih Bedrock-AgentCore/Evaluations atau namespace kustom yang Anda konfigurasikan
outputConfig.cloudWatchConfig.metricsNamespace -
Pilih kombinasi dimensi untuk mempersempit hasil secara opsional berdasarkan jenis evaluator atau label evaluasi
Untuk detail selengkapnya, lihat dokumentasi evaluasi pelacakan AWS CloudWatch sesi.