As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Painéis de monitoramento e alarmes no Amazon MWAA

A página de detalhes do ambiente de um ambiente Amazon Managed Workflows para Apache Airflow inclui um painel de CloudWatch métricas integrado e uma tabela de alarmes ambientais. Você pode usar esses recursos para monitorar a integridade do seu ambiente diretamente no console do Amazon MWAA, sem nenhuma configuração adicional.

O Apache Airflow expõe métricas para vários processos, incluindo o número de processos do DAG, o tamanho do pacote do DAG, as tarefas atualmente em execução, as falhas e os sucessos das tarefas. Quando você cria um ambiente, o Apache Airflow envia automaticamente métricas para seu ambiente Amazon MWAA para o. CloudWatch Além do painel integrado, você pode criar painéis personalizados na Amazon CloudWatch e adicionar alarmes para métricas específicas. Quando um alarme está em um painel, ele fica vermelho ao entrar no ALARM estado. Isso facilita o monitoramento proativo da integridade do seu ambiente Amazon MWAA.

Veja o painel de métricas

A página de detalhes do ambiente inclui um painel de CloudWatch métricas integrado, mostrado no console em CloudWatch métricas. Esse CloudWatch painel incorporado exibe gráficos para seu ambiente sem nenhuma configuração adicional.

Para abrir o conjunto completo de métricas no CloudWatch console, escolha Exibir tudo em CloudWatch.

O painel exibe métricas dos dois CloudWatch namespaces a seguir:

Você pode usar os seguintes controles para alterar o que o painel exibe:

Para ver a lista completa de métricas que o Amazon MWAA publica, consulte. Métricas do ambiente Apache Airflow em CloudWatch

Métricas mostradas no painel

O painel organiza os gráficos em seis seções que você pode filtrar com as seções Métricas. Ele mostra um conjunto selecionado de métricas para todo o ambiente; os gráficos vêm do namespace (métricas do Apache Airflow) e do AmazonMWAA namespace (métricas de contêiner, fila e banco AWS/MWAA de dados). A tabela a seguir lista os gráficos em cada seção e as CloudWatch métricas que cada uma exibe.

O painel mostra métricas agregadas em todo o ambiente. Ele não traça métricas de alta cardinalidade que o Apache Airflow publica por DAG, tarefa, pool, operador ou arquivo DAG, e traça a CPU e a memória do contêiner, mas não todas as métricas do contêiner. Para ver a lista completa das métricas publicadas, consulte Métricas do ambiente Apache Airflow em CloudWatch Métricas de contêiner, fila e banco de dados para Amazon MWAA e.

Crie e monitore alarmes

A página de detalhes do ambiente inclui um painel de Alarmes no qual você cria e gerencia seus alarmes e CloudWatch, em seguida, os monitora no contexto. O painel mostra uma tabela de alarmes ambientais que lista os CloudWatch alarmes atribuídos ao ambiente. O Amazon MWAA combina esses alarmes por CloudWatch namespace e Environment dimensão, portanto, a tabela inclui alarmes criados por você mesmo, não apenas os alarmes recomendados.

O cabeçalho do painel mostra uma contagem em alarme de quantos alarmes do ambiente estão atualmente no ALARM estado. A tabela de alarmes ambientais tem as seguintes colunas.

Se o ambiente não tiver alarmes, a tabela de alarmes ambientais está vazia e fornece orientação para criar os alarmes recomendados para começar a monitorar seu ambiente.

O painel Alarmes fornece os dois botões a seguir:

Depois de CloudFormation criar a pilha, os alarmes aparecem na tabela de alarmes ambientais e no console. CloudWatch Para obter mais informações sobre o significado de cada estado de alarme, consulteVisão geral dos estados de alarme.

Alarmes recomendados

Quando você escolhe Criar alarmes recomendados, o CloudFormation modelo cria os seguintes alarmes. CloudWatch avalia todos esses alarmes em períodos de 5 minutos (300 segundos).

Visão geral dos estados de alarme

Um alarme de métrica tem estes estados possíveis:

Exemplos de painéis e alarmes personalizados

Você pode definir seus próprios painéis e alarmes como infraestrutura, como código para criar painéis personalizados de forma programática ou para padronizar o monitoramento em vários ambientes do Amazon MWAA. Como alternativa ao painel integrado na página de detalhes do ambiente, o tutorial e o CloudFormation modelo a seguir criam um painel de monitoramento personalizado. Esse painel exibe gráficos de métricas selecionadas para seu ambiente Amazon MWAA.

Sobre essas métricas

A lista a seguir descreve cada uma das métricas criadas no painel personalizado pelas definições do tutorial e do modelo nesta seção.

Sobre o painel

A imagem a seguir mostra o painel de monitoramento criado pelo tutorial e pela definição do modelo nesta seção.

Utilizar AWS tutoriais

Você pode usar o AWS tutorial a seguir para criar automaticamente um painel de status de saúde para qualquer ambiente Amazon MWAA que esteja atualmente implantado. Ele também cria CloudWatch alarmes para trabalhadores insalubres e falhas na pulsação do agendador em todos os ambientes do Amazon MWAA.

Utilizar CloudFormation

Você pode usar a definição do CloudFormation modelo nesta seção para criar um painel de monitoramento e CloudWatch, em seguida, adicionar alarmes no CloudWatch console para receber notificações quando uma métrica ultrapassa um determinado limite. Para criar a pilha usando essa definição de modelo, consulte Criação de uma pilha no CloudFormation console. Para adicionar um alarme ao painel, consulte Como usar alarmes.

AWSTemplateFormatVersion: "2010-09-09"
Description: Creates MWAA Cloudwatch Dashboard
Parameters:
  DashboardName:
    Description: Enter the name of the CloudWatch Dashboard
    Type: String
  EnvironmentName:
    Description: Enter the name of the MWAA Environment
    Type: String    
Resources:
  BasicDashboard:
    Type: AWS::CloudWatch::Dashboard
    Properties:
      DashboardName: !Ref DashboardName
      DashboardBody:
        Fn::Sub: '{
              "widgets": [
                  {
                      "type": "metric",
                      "x": 0,
                      "y": 0,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "QueuedTasks",
                                  "Function",
                                  "Executor",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "QueuedTasks ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 0,
                      "y": 6,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "RunningTasks",
                                  "Function",
                                  "Executor",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "RunningTasks ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 12,
                      "y": 6,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "SchedulerHeartbeat",
                                  "Function",
                                  "Scheduler",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "SchedulerHeartbeat ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 12,
                      "y": 0,
                      "width": 12,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "TasksPending",
                                  "Function",
                                  "Scheduler",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "region": "${AWS::Region}",
                          "title": "TasksPending ${EnvironmentName}",
                          "period": 300
                      }
                  },
                  {
                      "type": "metric",
                      "x": 0,
                      "y": 12,
                      "width": 24,
                      "height": 6,
                      "properties": {
                          "view": "timeSeries",
                          "stacked": true,
                          "region": "${AWS::Region}",
                          "metrics": [
                              [
                                  "AmazonMWAA",
                                  "TotalParseTime",
                                  "Function",
                                  "DAG Processing",
                                  "Environment",
                                  "${EnvironmentName}"
                              ]
                          ],
                          "title": "TotalParseTime  ${EnvironmentName}",
                          "period": 300
                      }
                  }
              ]
          }'

Como apagar métricas e painéis

Se você excluir um ambiente Amazon MWAA, o painel correspondente também será excluído. CloudWatch as métricas são armazenadas por quinze (15) meses e não podem ser excluídas. O CloudWatch console limita a pesquisa de métricas a duas (2) semanas após a última ingestão de uma métrica para garantir que as instâncias mais atualizadas sejam exibidas em seu ambiente Amazon MWAA. Para saber mais, consulte as CloudWatch Perguntas frequentes https://aws.amazon.com/cloudwatch/faqs/ da Amazon.

Próximas etapas