Criar um ambiente do Amazon MWAA

Para especificar detalhes do ambiente

1. Abra o console do Amazon MWAA.

2. Use o seletor de regiões para selecionar uma região da AWS.

3. Selecione Create environment (Criar ambiente).

4. Na página Especificar detalhes, em Detalhes do ambiente:

   1. Digite um nome exclusivo para seu ambiente em Nome.

   2. Escolha a versão Apache Airflow na versão Airflow.

      nota

      Se nenhum valor for especificado, a versão será padronizada para a mais recente do Apache Airflow. A versão mais recente disponível é.

5. Em Código DAG no Amazon S3, selecione seu bucket do Amazon S3, especifique o seguinte:

   1. S3 Bucket. Escolha Browse S3 e selecione seu bucket do Amazon S3 ou insira o URI do Amazon S3.

   2. Pasta DAGs. Escolha Browse S3 e selecione a pasta dags em seu bucket do Amazon S3 ou insira o URI do Amazon S3.

   3. Arquivo de plug-ins - opcional. Escolha Browse S3 e selecione o arquivo plugins.zip em seu bucket do Amazon S3 ou insira o URI do Amazon S3.

   4. Arquivo de requisitos - opcional. Escolha Browse S3 e selecione o arquivo requirements.txt em seu bucket do Amazon S3 ou insira o URI do Amazon S3.

   5. Arquivo de script de inicialização - opcional, escolha Browse S3 e selecione o arquivo de script em seu bucket do Amazon S3 ou insira o URI do Amazon S3.

6. Escolha Próximo.

Para definir configurações avançadas

1. Na página Definir configurações avançadas, em Rede:

   1. Escolha sua Amazon VPC.

      Essa etapa preenche duas das sub-redes privadas em seu Amazon VPC.

2. Em Acesso ao servidor Web, selecione seu modo de acesso preferido do Apache Airflow:

   1. Rede privada. Isso limita o acesso da interface do usuário do Apache Airflow aos usuários dentro de seu Amazon VPC que receberam acesso à política do IAM para seu ambiente. Você precisa de permissão para criar endpoints da VPC Amazon para esta etapa.

      nota

      Escolha a opção de rede privada se sua IU do Apache Airflow for acessada somente dentro de uma rede corporativa e você não precisar de acesso a repositórios públicos para a instalação dos requisitos do servidor web. Se escolher essa opção de modo de acesso, precisará criar um mecanismo para acessar seu servidor Web do Apache Airflow em seu Amazon VPC. Para ter mais informações, consulte Como acessar o endpoint da VPC para seu servidor Web Apache Airflow (acesso à rede privada).

   2. Rede pública. Isso permite que a IU do Apache Airflow seja acessada pela Internet por usuários com acesso à política do IAM do seu ambiente.

3. Em Grupo (s) de segurança, escolha o grupo de segurança usado para proteger sua Amazon VPC:

   1. Por padrão, o Amazon MWAA cria um grupo de segurança em sua Amazon VPC com regras específicas de entrada e saída em Criar novo grupo de segurança.

   2. Opcional. Desmarque a caixa de seleção em Criar novo grupo de segurança para selecionar até 5 grupos de segurança.

      nota

      Um grupo de segurança existente do Amazon VPC deve ser configurado com regras específicas de entrada e saída para permitir o tráfego na rede. Para saber mais, consulte Segurança em sua VPC no Amazon MWAA.

4. Em Classe de ambiente, escolha uma classe de ambiente.

   Recomendamos escolher o menor tamanho necessário para dar suporte a sua workload. É possível fazer alterações na classe de ambiente a qualquer momento.

5. Em Contagem máxima de operadores, especifique o número máximo de operadores do Apache Airflow a serem executados no ambiente.

   Para ter mais informações, consulte Exemplo de caso de uso de alto desempenho.

6. Especifique a contagem máxima de servidores Web e a contagem mínima de servidores Web para configurar como o Amazon MWAA escala os servidores Web do Apache Airflow no ambiente.

   Para obter mais informações sobre o ajuste de escala automático de servidores Web, consulte Como configurar o ajuste de escala automático do servidor Web do Amazon MWAA.

7. Em Criptografia, escolha uma opção de criptografia de dados:

   1. Por padrão, o Amazon MWAA usa uma chave pertencente à AWS para criptografar seus dados.

   2. Opcional. Escolha Personalizar configurações de criptografia (avançadas) para escolher uma AWS KMS chave diferente. Se optar por especificar uma chave gerenciada pelo cliente nesta etapa, deverá especificar um ID de chave AWS KMS ou ARN. Chaves aliases AWS KMS e multirregionais não são compatíveis com o Amazon MWAA. Se você especificou uma chave Amazon S3 para criptografia do lado do servidor em seu bucket Amazon S3, você deve especificar a mesma chave para seu ambiente Amazon MWAA.

      nota

      Você deve ter permissões para a chave para selecioná-la no console do Amazon MWAA. Você também deve conceder permissões para que o Amazon MWAA use a chave anexando a política descrita em Anexar política de chave.

8. Recomendado. Em Monitoramento, escolha uma ou mais categorias de registro para a configuração de registro do Airflow para enviar os registros do Apache Airflow para o CloudWatch Logs:

   1. Logs de tarefas do Airflow. Os tipos de logs do Apache Airflow a serem enviados para o CloudWatch Logs no nível de log.

   2. Logs do servidor web Airflow. Os tipos de logs do servidor Web do Apache Airflow a serem enviados para o CloudWatch Logs no nível de log.

   3. Logs do agendador de Airflow. Os tipos de logs de programador do Apache Airflow a serem enviados para o CloudWatch Logs no nível de log.

   4. Logs de operadores do Airflow. Escolha o tipo de logs do Apache Airflow a serem enviados para o CloudWatch Logs no nível de log.

   5. Logs de processamento do Airflow DAG. Os tipos de logs de processamento de DAGs do Apache Airflow a serem enviados para o CloudWatch Logs no nível de log.

9. Opcional. Para opções de configuração do Airflow, escolha Adicionar opção de configuração personalizada.

   É possível escolher na lista suspensa sugerida das opções de configuração do Apache Airflow para sua versão do Apache Airflow ou especificar opções de configuração personalizadas. Por exemplo, core.default_task_retries : 3.

10. Opcional. Em Tags, escolha Adicionar nova tag para associar tags ao seu ambiente. Por exemplo, Environment: Staging.

11. Em Permissões, escolha um perfil de execução:

    1. Por padrão, o Amazon MWAA cria um perfil de execução em Create a new role (Criar um nova perfil). Você deve ter permissão para criar perfis do IAM.

    2. Opcional. Escolha Inserir ARN de perfil (ARN) para inserir o nome do recurso da Amazon (ARN) de um perfil de execução existente.

12. Escolha Next (Próximo).

Para revisar um resumo do ambiente

• Revise o resumo do ambiente e escolha Criar ambiente.

  nota

  Leva cerca de vinte a trinta minutos para criar um ambiente.