Solução de problemas para Amazon Managed Workflows para Apache Airflow
Este tópico descreve problemas e erros comuns que você pode encontrar ao usar o Apache Airflow no Amazon Managed Workflows para Apache Airflow e as etapas recomendadas para resolver esses erros.
Sumário
- Solução de problemas: DAGs, operadores, conexões e outros problemas no Apache Airflow v2
- Solução de problemas: DAGs, Operadores, Conexões e outros problemas no Apache Airflow v1
- Como atualizar requirements.txt
- DAG quebrado
- Recebi um erro “Broken DAG” (DAG quebrado) ao usar operadores do Amazon DynamoDB
- Recebi o erro “Broken DAG: No module named psycopg2” (DAG quebrado: Nenhum módulo chamado psycopg2)
- Recebi um erro “Broken DAG” (DAG quebrado) ao usar os operadores do Slack
- Recebi vários erros ao instalar o Google/GCP/BigQuery
- Recebi o erro “Broken DAG: No module named Cython” (DAG quebrado: nenhum módulo chamado Cython)
- Operadores
- Conexões
- Servidor web
- Tarefas
- CLI
- Solução de problemas: Como criar e atualizar um ambiente do Amazon MWAA
- Atualizar o requirements.txt
- Plug-ins
- Criar bucket
- Criar o ambiente do
- Tentei criar um ambiente e ele está travado no estado “Criando”
- Tentei criar um ambiente, mas ele mostra o status como “Falha na criação”
- Tentei selecionar uma VPC e recebi o erro “Falha de rede”
- Tentei criar um ambiente e recebi um erro de serviço, partição ou recurso “deve ser transferido”
- Tentei criar um ambiente e ele mostra o status como “Disponível”, mas quando tento acessar a IU do Airflow, aparece um erro de “Resposta vazia do servidor” ou “502 Bad Gateway”
- Tentei criar um ambiente e meu nome de usuário é um monte de caracteres aleatórios
- Atualizar ambiente
- Ambiente de acesso
- Solução de problemas: erros do CloudWatch Logs e do CloudTrail
- Logs
- Não consigo ver meus registros de tarefas ou recebi o erro “Lendo o log remoto do Cloudwatch log_group”
- As tarefas estão falhando sem nenhum log
- Vejo um erro “ResourceAlreadyExistsException” no CloudTrail
- Eu vejo um erro de “Solicitação inválida” no CloudTrail
- Eu vejo uma mensagem “Não é possível localizar uma biblioteca Oracle Client de 64 bits: “libclntsh.so: não é possível abrir o arquivo de objeto compartilhado: esse arquivo ou diretório não existe” nos logs do Apache Airflow
- Vejo psycopg2 'o servidor fechou a conexão inesperadamente' nos meus logs do Agendador
- Vejo “O executor relata a instância da tarefa %s concluída (%s), embora a tarefa diga que é %s” nos meus registros de processamento do DAG
- Eu vejo 'Não foi possível ler os logs remotos do log_group: airflow-* {*environmentName} -Task log_stream: * {*DAG_ID} /* {*TASK_ID} /* {*time} /* {*n} .log. ' nos meus logs de tarefas
- Logs
