기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

Amazon MWAA의 대시보드 및 알람 모니터링

Amazon Managed Workflows for Apache Airflow 환경의 환경 세부 정보 페이지에는 기본 제공 CloudWatch 지표 대시보드와 환경 경보 테이블이 포함되어 있습니다. 이러한 기능을 사용하면 추가 설정 없이 Amazon MWAA 콘솔에서 직접 환경 상태를 모니터링할 수 있습니다.

Apache Airflow는 DAG 프로세스 수, DAG 백 크기, 현재 실행 중인 작업, 작업 실패, 성공을 포함한 몇 가지 프로세스에 대한 지표를 공개합니다. 환경을 생성하면 Apache Airflow는 Amazon MWAA 환경에 대한 지표를 CloudWatch로 자동으로 전송합니다. 기본 제공 대시보드 외에도 Amazon CloudWatch에서 사용자 지정 대시보드를 구축하고 특정 지표에 대한 경보를 추가할 수 있습니다. 경보가 대시보드에 있으면 ALARM 상태가 되면 빨간색으로 바뀝니다. 이렇게 하면 Amazon MWAA 환경의 상태를 사전에 더 쉽게 모니터링할 수 있습니다.

지표 대시보드 보기

환경 세부 정보 페이지에는 콘솔의 CloudWatch 지표 아래에 표시된 기본 제공 CloudWatch 지표 대시보드가 포함되어 있습니다. 이 임베디드 CloudWatch 대시보드는 추가 설정 없이 환경에 대한 차트를 표시합니다.

CloudWatch 콘솔에서 전체 지표 세트를 열려면 CloudWatch에서 모두 보기를 선택합니다.

대시보드에는 다음 두 CloudWatch 네임스페이스의 지표가 표시됩니다.

다음 컨트롤을 사용하여 대시보드에 표시되는 내용을 변경할 수 있습니다.

Amazon MWAA가 게시하는 지표의 전체 목록은 섹션을 참조하세요CloudWatch의 Apache Airflow 환경 지표.

대시보드에 표시된 지표

대시보드는 지표 섹션으로 필터링할 수 있는 6개의 섹션으로 차트를 구성합니다. 큐레이션된 환경 전체 지표 세트를 보여줍니다. 차트는 AmazonMWAA 네임스페이스(Apache Airflow 지표)와 AWS/MWAA 네임스페이스(컨테이너, 대기열 및 데이터베이스 지표)에서 가져옵니다. 다음 표에는 각 섹션의 차트와 각 섹션에 표시되는 CloudWatch 지표가 나열되어 있습니다.

대시보드에는 환경 전반의 집계 지표가 표시됩니다. Apache Airflow가 DAG, 작업, 풀, 연산자 또는 DAG 파일당 게시하는 높은 카디널리티 지표를 차트로 작성하지 않고 컨테이너 CPU와 메모리를 차트로 작성하지만 모든 컨테이너 지표를 차트로 작성하지는 않습니다. 게시된 지표의 전체 목록은 CloudWatch의 Apache Airflow 환경 지표 및 섹션을 참조하세요Amazon MWAA의 컨테이너, 대기열 및 데이터베이스 지표.

경보 생성 및 모니터링

환경 세부 정보 페이지에는 CloudWatch에서 경보를 생성 및 관리한 다음 컨텍스트에서 모니터링하는 경보 창이 포함되어 있습니다. 창에는 환경에 귀속되는 CloudWatch 경보를 나열하는 환경 경보 테이블이 표시됩니다. CloudWatch Amazon MWAA는 CloudWatch 네임스페이스 및 Environment차원별로 이러한 경보와 일치하므로 테이블에는 권장 경보뿐만 아니라 직접 작성한 경보도 포함됩니다.

창 헤더에는 현재 ALARM 상태에 있는 환경의 경보 수에 대한 In 경보 수가 표시됩니다. 환경 경보 테이블에는 다음 열이 있습니다.

환경에 경보가 없는 경우 환경 경보 테이블이 비어 있고 환경 모니터링을 시작하기 위한 권장 경보를 생성하는 지침을 제공합니다.

경보 창에는 다음과 같은 두 개의 버튼이 있습니다.

가 스택을 CloudFormation 생성하면 환경 경보 테이블과 CloudWatch 콘솔에 경보가 나타납니다. 각 경보 상태의 의미에 대한 자세한 내용은 섹션을 참조하세요경보 상태 개요.

권장되는 경보

권장 경보 생성을 선택하면 CloudFormation 템플릿이 다음 경보를 생성합니다. CloudWatch는 5분(300초) 동안 이러한 모든 경보를 평가합니다.

경보 상태 개요

지표 경보에는 다음과 같은 상태가 있을 수 있습니다.

사용자 지정 대시보드 및 경보의 예

자체 대시보드와 경보를 코드형 인프라로 정의하여 프로그래밍 방식으로 사용자 지정 대시보드를 구축하거나 여러 Amazon MWAA 환경에서 모니터링을 표준화할 수 있습니다. 환경 세부 정보 페이지의 기본 제공 대시보드 대신 다음 자습서 및 CloudFormation 템플릿은 사용자 지정 모니터링 대시보드를 생성합니다. 이 대시보드에는 Amazon MWAA 환경에 대해 선택한 지표의 차트가 표시됩니다.

이러한 지표에 대한 정보

다음 목록은 이 섹션의 튜토리얼 및 템플릿 정의를 통해 사용자 지정 대시보드에서 만든 각 지표를 설명합니다.

대시보드 정보

다음 이미지는 이 섹션의 튜토리얼 및 템플릿 정의로 생성된 모니터링 대시보드를 보여줍니다.

자 AWS 습서 사용

다음 AWS 자습서를 사용하여 현재 배포된 모든 Amazon MWAA 환경에 대한 상태 대시보드를 자동으로 생성할 수 있습니다. 또한 모든 Amazon MWAA 환경에서 건강하지 못한 작업자와 스케줄러 하트비트 장애에 대한 CloudWatch 경보를 생성합니다.

사용 CloudFormation

이 섹션의 CloudFormation 템플릿 정의를 사용하여 CloudWatch에서 모니터링 대시보드를 생성한 다음 지표가 특정 임계값을 초과할 때 알림을 수신하도록 CloudWatch 콘솔에 경보를 추가할 수 있습니다. 이 템플릿 정의를 사용하여 스택을 생성하려면 CloudFormation 콘솔에서 스택 생성을 참조하세요. 대시보드에 경보를 추가하려면 경보 사용을 참조하세요.

AWSTemplateFormatVersion: "2010-09-09"
Description: Creates MWAA Cloudwatch Dashboard
Parameters:
  DashboardName:
    Description: Enter the name of the CloudWatch Dashboard
    Type: String
  EnvironmentName:
    Description: Enter the name of the MWAA Environment
    Type: String    
Resources:
  BasicDashboard:
    Type: AWS::CloudWatch::Dashboard
    Properties:
      DashboardName: !Ref DashboardName
      DashboardBody:
        Fn::Sub: '{
              "widgets": [
                  {
                      "type": "metric",
                      "x": 0,
                      "y": 0,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "QueuedTasks",
                                  "Function",
                                  "Executor",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "QueuedTasks ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 0,
                      "y": 6,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "RunningTasks",
                                  "Function",
                                  "Executor",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "RunningTasks ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 12,
                      "y": 6,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "SchedulerHeartbeat",
                                  "Function",
                                  "Scheduler",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "SchedulerHeartbeat ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 12,
                      "y": 0,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "TasksPending",
                                  "Function",
                                  "Scheduler",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "TasksPending ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 0,
                      "y": 12,
                      "width": 24,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "region": "${AWS::Region}",
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "TotalParseTime",
                                  "Function",
                                  "DAG Processing",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "title": "TotalParseTime  ${EnvironmentName}",
                          "period": 300
                      }
                  }
              ]
          }'

지표 및 대시보드 삭제

Amazon MWAA 환경을 삭제하면 해당 대시보드도 삭제됩니다. CloudWatch 지표는 15개월 동안 저장되며 삭제할 수 없습니다. CloudWatch 콘솔은 Amazon MWAA 환경에서 가장 최신 인스턴스가 표시되도록 지표 검색 기간을 지표가 마지막으로 수집된 후 2주로 제한합니다. 자세한 내용은 Amazon CloudWatch FAQ를 참조하세요.

다음 단계