Pencatatan terus menerus untuk AWS Glue pekerjaan - AWS Glue

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Pencatatan terus menerus untuk AWS Glue pekerjaan

AWS Glue menyediakan pencatatan log secara waktu nyata dan berkelanjutan untuk tugas AWS Glue. Anda dapat melihat log pekerjaan Apache Spark real-time di Amazon CloudWatch, termasuk log driver, log pelaksana, dan bilah kemajuan pekerjaan Apache Spark. Melihat log waktu nyata memberi Anda perspektif yang lebih baik tentang tugas yang sedang berjalan.

Ketika Anda memulai AWS Glue pekerjaan, ia mengirimkan informasi pencatatan waktu nyata ke CloudWatch (setiap 5 detik dan sebelum setiap penghentian pelaksana) setelah aplikasi Spark mulai berjalan. Anda dapat melihat log di AWS Glue konsol atau dasbor CloudWatch konsol.

Fitur pencatatan log berkelanjutan mencakup kemampuan berikut:

  • Pencatatan log berkelanjutan

  • Pencatat log skrip kustom untuk mencatat log pesan spesifik-aplikasi

  • Sebuah bar kemajuan konsol untuk melacak status berjalan dari tugas AWS Glue saat ini

Untuk informasi tentang bagaimana pencatatan log berkelanjutan didukung di AWS Glue Versi 2.0, lihat Menjalankan Tugas ETL Spark dengan Waktu Pemulaian yang Dikurangi.

Anda dapat membatasi akses ke grup CloudWatch log atau aliran untuk peran IAM untuk membaca log. Untuk detail selengkapnya tentang pembatasan akses, lihat Menggunakan kebijakan berbasis identitas (kebijakan IAM) untuk CloudWatch Log dalam dokumentasi. CloudWatch

catatan

Anda mungkin dikenakan biaya tambahan ketika Anda mengaktifkan pencatatan berkelanjutan dan peristiwa CloudWatch log tambahan dibuat. Untuk informasi selengkapnya, lihat CloudWatch harga Amazon.