View a markdown version of this page

Sobre a rede do Amazon MWAA - Amazon Managed Workflows for Apache Airflow

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Sobre a rede do Amazon MWAA

Um Amazon VPC é uma rede virtual vinculada ao seu Conta da AWS. Oferece segurança na nuvem e a capacidade de escalar dinamicamente ao fornecer controle refinado sobre sua infraestrutura virtual e a segmentação do tráfego de rede. Esta página descreve a infraestrutura do Amazon VPC com roteamento público, roteamento privado ou roteamento público e privado necessários para dar suporte a um ambiente Amazon Managed Workflows para Apache Airflow.

Termos

Roteamento público

Uma rede da Amazon VPC que tem acesso à internet.

Roteamento privado

Uma rede da Amazon VPC sem acesso à internet.

O que é compatível

A tabela a seguir descreve os tipos de Amazon VPCs compatíveis com o Amazon MWAA.

Tipos de Amazon VPC Compatível

Um Amazon VPC de propriedade da conta que está tentando criar o ambiente.

Sim

Um Amazon VPC compartilhado em que vários Contas da AWS criam seus AWS recursos.

Sim

Visão geral da infraestrutura da VPC

Ao criar um ambiente Amazon MWAA, o Amazon MWAA cria entre um a dois endpoints da VPC para seu ambiente com base no modo de acesso do Apache Airflow que você escolheu para seu ambiente. Esses endpoints aparecem como interfaces de rede elástica (ENIs) com IPs privados em sua Amazon VPC. Depois que esses endpoints são criados, qualquer tráfego destinado a esses IPs é roteado de forma privada ou pública para os AWS serviços correspondentes usados pelo seu ambiente.

A seção a seguir descreve a infraestrutura da Amazon VPC necessária para rotear o tráfego publicamente pela internet ou de forma privada dentro da sua Amazon VPC.

Roteamento público pela internet

Esta seção descreve a infraestrutura do Amazon VPC de um ambiente com roteamento público. Você precisará da seguinte infraestrutura de VPC:

  • Um grupo de segurança da VPC. Um grupo de segurança VPC atua como um firewall virtual para sua instância para controlar o tráfego de entrada e saída.

  • Duas sub-redes públicas. A sub-rede pública é uma sub-rede associada a uma tabela de rotas que contém uma rota para um gateway da Internet.

    • São necessárias duas sub-redes públicas. Isso permite que o Amazon MWAA crie uma nova imagem de contêiner para seu ambiente em sua outra zona de disponibilidade, se um contêiner falhar.

    • As duas sub-redes devem estar em zonas de disponibilidade diferentes. Por exemplo, us-east-1a, us-east-1b.

    • As sub-redes precisam de uma tabela de rotas que direcione o tráfego de internet para o gateway da internet.

  • Duas sub-redes privadas. Uma sub-rede privada é uma sub-rede que não é associada a uma tabela de rotas que contém uma rota para um gateway da internet.

    • São necessárias duas sub-redes privadas. Isso permite que o Amazon MWAA crie uma nova imagem de contêiner para seu ambiente em sua outra zona de disponibilidade, se um contêiner falhar.

    • As duas sub-redes devem estar em zonas de disponibilidade diferentes. Por exemplo, us-east-1a, us-east-1b.

    • As sub-redes devem ter uma tabela de rotas para um dispositivo NAT (gateway ou instância).

    • As sub-redes não podem rotear para um gateway da internet.

    • Defina assignIpV6AddressOnCreation como true para sub-redes IPv6.

    • Para sub-redes privadas IPv6, você deve ter uma conexão com um gateway da internet apenas de saída (EIGW).

  • Uma lista de controle de acesso (ACL) à rede. Listas de controle de acesso (ACL) à rede: as ACLs da rede permitem ou negam determinado tráfego de entrada e de saída no nível da sub-rede.

    • A NACL deve ter uma regra de entrada que permita todo o tráfego (0.0.0.0/0; para IPv6, use ::/0).

    • A NACL deve ter uma regra de saída que permita todo o tráfego (0.0.0.0/0; para IPv6, use ::/0).

    • Por exemplo, .Exemplo (recomendado) ACLs

  • Um gateway NAT (ou instância NAT). Com um gateway NAT (ou instância NAT), você pode rotear o tráfego de instâncias na sub-rede privada para a Internet ou outros AWS serviços e receber respostas.

    • O dispositivo NAT deve estar conectado a uma sub-rede pública.

    • O dispositivo NAT deve ter um endereço IPv4 elástico (EIP) conectado a cada sub-rede pública.

    Alta disponibilidade

    Para alta disponibilidade, considere provisionar um dispositivo NAT separado em cada uma das sub-redes públicas.

  • Um gateway de internet. Um gateway de internet conecta um Amazon VPC à Internet e a outros AWS serviços.

    • Um gateway da internet deve ser anexado à Amazon VPC.

Roteamento privado sem acesso à internet

Esta seção descreve a infraestrutura do Amazon VPC de um ambiente com roteamento privado. Você precisará da seguinte infraestrutura de VPC:

  • Um grupo de segurança da VPC. Um grupo de segurança VPC atua como um firewall virtual para sua instância para controlar o tráfego de entrada e saída.

  • Duas sub-redes privadas. Uma sub-rede privada é uma sub-rede que não é associada a uma tabela de rotas que contém uma rota para um gateway da internet.

    • São necessárias duas sub-redes privadas. Isso permite que o Amazon MWAA crie uma nova imagem de contêiner para seu ambiente em sua outra zona de disponibilidade, se um contêiner falhar.

    • As duas sub-redes devem estar em zonas de disponibilidade diferentes. Por exemplo, us-east-1a, us-east-1b.

    • As sub-redes devem ter uma tabela de rotas para seus endpoints da VPC.

    • As sub-redes devem ter uma tabela de rotas para um EIGW para serem baixadas da internet como parte de um DAG.

    • As sub-redes não devem ter uma tabela de rotas para um dispositivo NAT (gateway ou instância) e nem um gateway da internet.

  • Uma lista de controle de acesso (ACL) à rede. Listas de controle de acesso (ACL) à rede: as ACLs da rede permitem ou negam determinado tráfego de entrada e de saída no nível da sub-rede.

    • A NACL deve ter uma regra de entrada que permita todo o tráfego (0.0.0.0/0; para IPv6, use ::/0).

    • A NACL deve ter uma regra de saída que recuse todo o tráfego (0.0.0.0/0; para IPv6, use ::/0).

    • Por exemplo, .Exemplo (recomendado) ACLs

  • Uma tabela de rotas local. Uma tabela de rotas local é uma rota padrão para comunicação dentro da VPC.

    • A tabela de rotas local deve estar associada às suas sub-redes privadas.

    • A tabela de rotas local deve permitir que as instâncias em sua VPC se comuniquem com a rede. Por exemplo, se você estiver usando um AWS Client VPN para acessar o endpoint da interface VPC para seu servidor web Apache Airflow, a tabela de rotas deve rotear para o endpoint VPC.

  • Endpoints de VPC para cada AWS serviço usado por seu ambiente e endpoints de VPC do Apache Airflow no mesmo ambiente Região da AWS e Amazon VPC em seu ambiente Amazon MWAA.

Exemplos de casos de uso para um modo de acesso Amazon VPC e Apache Airflow

Esta seção descreve os diferentes casos de uso para acesso à rede em sua Amazon VPC e o modo de acesso ao servidor Web do Apache Airflow que você deve escolher no console do Amazon MWAA.

O acesso à Internet é permitido: nova rede Amazon VPC

Se o acesso à internet em sua VPC for permitido pela sua organização e você quiser que os usuários acessem o servidor Web do Apache Airflow pela internet:

  1. Crie uma rede Amazon VPC com acesso à internet.

  2. Crie um ambiente com o modo de acesso à rede pública para seu servidor Web do Apache Airflow.

  3. O que recomendamos: Recomendamos usar o modelo de CloudFormation início rápido que cria a infraestrutura Amazon VPC, um bucket do Amazon S3 e um ambiente Amazon MWAA ao mesmo tempo. Consulte Tutoriais de início rápido para Amazon Managed Workflows for Apache Airflow para saber mais.

Se o acesso à internet em sua VPC for permitido pela sua organização e você quiser que os usuários tenham acesso limitado ao servidor Web do Apache Airflow em sua VPC:

  1. Crie uma rede Amazon VPC com acesso à internet.

  2. Crie um mecanismo para acessar o endpoint da interface VPC do seu servidor Web do Apache Airflow a partir do seu computador.

  3. Crie um ambiente com o modo de acesso à rede privada para seu servidor Web do Apache Airflow.

  4. O que recomendamos:

    1. Recomendamos usar o console do Amazon MWAA em ou Opção um: criar a rede VPC no console Amazon MWAA o CloudFormation modelo em. Opção dois: criar uma rede Amazon VPC com acesso à internet

    2. Recomendamos configurar o acesso usando um AWS Client VPN para seu servidor web Apache Airflow em. Tutorial: Configurando o acesso à rede privada usando um AWS Client VPN

O acesso à Internet não é permitido: nova rede Amazon VPC

Se o acesso à Internet na sua VPC não for permitido pela sua organização e você quiser que o servidor web Apache Airflow permaneça acessível pela Internet:

  1. Crie uma rede Amazon VPC sem acesso à internet.

  2. Crie um ambiente com o modo de acesso à rede pública e privada para seu servidor web Apache Airflow. Essa opção está disponível para o Apache Airflow versão 3.2.1 e posterior.

  3. O que recomendamos: Recomendamos usar o CloudFormation modelo para criar um Amazon VPC sem acesso à Internet e os endpoints de VPC para cada AWS serviço usado pelo Amazon MWAA em. Opção três: criar uma rede Amazon VPC sem acesso à internet

Se o acesso à Internet na sua VPC não for permitido pela sua organização e você quiser limitar o acesso ao servidor web Apache Airflow aos usuários dentro da sua VPC:

  1. Crie uma rede Amazon VPC sem acesso à internet.

  2. Crie um mecanismo para acessar o endpoint da interface VPC do seu servidor Web do Apache Airflow a partir do seu computador.

  3. Crie endpoints de VPC para cada AWS serviço usado pelo seu ambiente.

  4. Crie um ambiente com o modo de acesso à rede privada para seu servidor Web do Apache Airflow.

  5. O que recomendamos:

    1. Recomendamos usar o CloudFormation modelo para criar um Amazon VPC sem acesso à Internet e os endpoints de VPC para cada AWS serviço usado pelo Amazon MWAA em. Opção três: criar uma rede Amazon VPC sem acesso à internet

    2. Recomendamos configurar o acesso usando um AWS Client VPN para seu servidor web Apache Airflow em. Tutorial: Configurando o acesso à rede privada usando um AWS Client VPN

O acesso à Internet não é permitido: rede Amazon VPC existente

Se o acesso à internet em sua VPC não for permitido pela sua organização e você já tiver a rede Amazon VPC necessária sem acesso à internet:

  1. Crie endpoints de VPC para cada AWS serviço usado pelo seu ambiente.

  2. Crie endpoints da VPC para o Apache Airflow.

  3. Crie um mecanismo para acessar o endpoint da interface VPC do seu servidor Web do Apache Airflow a partir do seu computador.

  4. Crie um ambiente com o modo de acesso à rede privada para seu servidor Web do Apache Airflow.

  5. O que recomendamos:

    1. Recomendamos criar e anexar os endpoints de VPC necessários para cada AWS serviço usado pelo Amazon MWAA e os endpoints de VPC necessários para o Apache Airflow in. Como criar endpoints de serviço de VPC necessários em um Amazon VPC com roteamento privado

    2. Recomendamos configurar o acesso usando um AWS Client VPN para seu servidor web Apache Airflow em. Tutorial: Configurando o acesso à rede privada usando um AWS Client VPN