Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Memantau dasbor dan alarm di Amazon MWAA

Halaman detail lingkungan untuk lingkungan Alur Kerja Terkelola Amazon untuk Apache Airflow menyertakan dasbor CloudWatch metrik bawaan dan tabel alarm Lingkungan. Anda dapat menggunakan fitur-fitur ini untuk memantau kesehatan lingkungan Anda secara langsung di konsol Amazon MWAA, tanpa pengaturan tambahan apa pun.

Apache Airflow memaparkan metrik untuk beberapa proses, termasuk jumlah proses DAG, ukuran bag DAG, tugas yang sedang berjalan, kegagalan tugas, dan keberhasilan. Saat Anda membuat lingkungan, Apache Airflow secara otomatis mengirimkan metrik untuk lingkungan Amazon MWAA Anda ke CloudWatch. Selain dasbor bawaan, Anda dapat membuat dasbor khusus di Amazon CloudWatch dan menambahkan alarm untuk metrik tertentu. Ketika alarm ada di dasbor, itu berubah menjadi merah ketika memasuki ALARM keadaan. Ini membuatnya lebih mudah untuk memantau kesehatan lingkungan Amazon MWAA Anda secara proaktif.

Lihat dasbor metrik

Halaman detail lingkungan menyertakan dasbor CloudWatch metrik bawaan, ditampilkan di konsol di bawah CloudWatch metrik. CloudWatch Dasbor tertanam ini menampilkan bagan untuk lingkungan Anda tanpa pengaturan tambahan.

Untuk membuka kumpulan metrik lengkap di CloudWatch konsol, pilih Lihat semua di CloudWatch.

Dasbor menampilkan metrik dari dua ruang nama CloudWatch berikut:

Anda dapat menggunakan kontrol berikut untuk mengubah tampilan dasbor:

Untuk daftar lengkap metrik yang diterbitkan Amazon MWAA, lihatMetrik lingkungan Apache Airflow di CloudWatch.

Metrik yang ditampilkan di dasbor

Dasbor mengatur bagan menjadi enam bagian yang dapat Anda filter dengan bagian Metrik. Ini menunjukkan serangkaian metrik lingkungan yang dikuratori; bagan berasal dari namespace (metrik Apache Airflow) dan AmazonMWAA AWS/MWAA namespace (wadah, antrian, dan metrik database). Tabel berikut mencantumkan bagan di setiap bagian dan CloudWatch metrik yang ditampilkan masing-masing.

Dasbor menunjukkan metrik agregat di seluruh lingkungan. Itu tidak memetakan metrik kardinalitas tinggi yang diterbitkan Apache Airflow per DAG, tugas, kumpulan, operator, atau file DAG, dan memetakan CPU dan memori kontainer tetapi tidak setiap metrik kontainer. Untuk daftar lengkap metrik yang dipublikasikan, lihat Metrik lingkungan Apache Airflow di CloudWatch danMetrik kontainer, antrian, dan database untuk Amazon MWAA.

Membuat dan memantau alarm

Halaman detail lingkungan menyertakan panel Alarm tempat Anda membuat dan mengelola alarm CloudWatch, lalu memantaunya dalam konteks. Panel menampilkan tabel alarm Lingkungan yang mencantumkan CloudWatch alarm yang dikaitkan dengan lingkungan. Amazon MWAA mencocokkan alarm ini berdasarkan CloudWatch namespace dan Environment dimensi, jadi tabel menyertakan alarm yang Anda buat sendiri, bukan hanya alarm yang disarankan.

Header panel menunjukkan jumlah alarm In dari berapa banyak alarm lingkungan yang saat ini berada dalam ALARM status. Tabel alarm lingkungan memiliki kolom berikut.

Jika lingkungan tidak memiliki alarm, tabel alarm lingkungan kosong dan memberikan panduan untuk membuat alarm yang disarankan untuk mulai memantau lingkungan Anda.

Panel Alarm menyediakan dua tombol berikut:

Setelah CloudFormation membuat tumpukan, alarm muncul di tabel alarm lingkungan dan di CloudWatch konsol. Untuk informasi lebih lanjut tentang apa arti setiap status alarm, lihatIkhtisar status alarm.

Alarm-alarm yang direkomendasikan

Ketika Anda memilih Buat alarm yang disarankan, CloudFormation template membuat alarm berikut. CloudWatch mengevaluasi semua alarm ini selama periode 5 menit (300 detik).

Ikhtisar status alarm

Sebuah alarm metrik mungkin saja berada dalam status berikut ini:

Contoh dasbor dan alarm kustom

Anda dapat menentukan dasbor dan alarm Anda sendiri sebagai infrastruktur sebagai kode untuk membuat dasbor khusus secara terprogram atau untuk menstandarisasi pemantauan di beberapa lingkungan Amazon MWAA. Sebagai alternatif untuk dasbor bawaan di halaman detail lingkungan, tutorial dan CloudFormation template berikut membuat dasbor pemantauan khusus. Dasbor ini menampilkan bagan metrik yang dipilih untuk lingkungan Amazon MWAA Anda.

Tentang metrik ini

Daftar berikut menjelaskan setiap metrik yang dibuat di dasbor kustom oleh tutorial dan definisi template di bagian ini.

Tentang dasbor

Gambar berikut menampilkan dasbor pemantauan yang dibuat oleh tutorial dan definisi template di bagian ini.

Penggunaan AWS tutorial

Anda dapat menggunakan AWS tutorial berikut untuk secara otomatis membuat dasbor status kesehatan untuk lingkungan Amazon MWAA apa pun yang saat ini digunakan. Ini juga menciptakan CloudWatch alarm untuk pekerja yang tidak sehat dan kegagalan detak jantung penjadwal di semua lingkungan Amazon MWAA.

Penggunaan CloudFormation

Anda dapat menggunakan definisi CloudFormation template di bagian ini untuk membuat dasbor pemantauan di CloudWatch, lalu menambahkan alarm di CloudWatch konsol untuk menerima pemberitahuan saat metrik melampaui ambang batas tertentu. Untuk membuat tumpukan menggunakan definisi template ini, lihat Membuat tumpukan di CloudFormation konsol. Untuk menambahkan alarm ke dasbor, lihat Menggunakan alarm.

AWSTemplateFormatVersion: "2010-09-09"
Description: Creates MWAA Cloudwatch Dashboard
Parameters:
  DashboardName:
    Description: Enter the name of the CloudWatch Dashboard
    Type: String
  EnvironmentName:
    Description: Enter the name of the MWAA Environment
    Type: String    
Resources:
  BasicDashboard:
    Type: AWS::CloudWatch::Dashboard
    Properties:
      DashboardName: !Ref DashboardName
      DashboardBody:
        Fn::Sub: '{
              "widgets": [
                  {
                      "type": "metric",
                      "x": 0,
                      "y": 0,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "QueuedTasks",
                                  "Function",
                                  "Executor",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "QueuedTasks ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 0,
                      "y": 6,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "RunningTasks",
                                  "Function",
                                  "Executor",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "RunningTasks ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 12,
                      "y": 6,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "SchedulerHeartbeat",
                                  "Function",
                                  "Scheduler",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "SchedulerHeartbeat ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 12,
                      "y": 0,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "TasksPending",
                                  "Function",
                                  "Scheduler",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "TasksPending ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 0,
                      "y": 12,
                      "width": 24,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "region": "${AWS::Region}",
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "TotalParseTime",
                                  "Function",
                                  "DAG Processing",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "title": "TotalParseTime  ${EnvironmentName}",
                          "period": 300
                      }
                  }
              ]
          }'

Menghapus metrik dan dasbor

Jika Anda menghapus lingkungan Amazon MWAA, dasbor yang sesuai juga dihapus. CloudWatch metrik disimpan selama lima belas (15) bulan dan tidak dapat dihapus. Kon CloudWatch sol membatasi pencarian metrik hingga dua (2) minggu setelah metrik terakhir dicerna untuk memastikan bahwa instance terbaru ditampilkan untuk lingkungan Amazon MWAA Anda. Untuk mempelajari lebih lanjut, lihat CloudWatch FAQ Amazon.

Apa selanjutnya?