Pacotes do provedor Apache Airflow instalados em ambientes Amazon MWAA

A Amazon MWAA instala extras do provedor para os tipos de conexão Apache Airflow v2 e superiores quando você cria um novo ambiente. A instalação de pacotes do provedor permite que você visualize um tipo de conexão na IU do Apache Airflow. Também significa que você não precisa especificar esses pacotes como uma dependência do Python em seu arquivo requirements.txt. Esta página lista os pacotes do provedor Apache Airflow instalados MWAA pela Amazon para todos os ambientes Apache Airflow v2.

nota

Para o Apache Airflow v2 e versões posteriores, a Amazon MWAA instala a Watchtower versão 2.0.1 após a execuçãopip3 install -r requirements.txt, para garantir que a compatibilidade com o registro não CloudWatch seja substituída por outras instalações da biblioteca Python.

Sumário

Pacotes de provedores para conexões Apache Airflow v2.10.3

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.10.3, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

nota

É possível especificar a versão mais recente compatível de apache-airflow-providers-amazon para atualizar este provedor. Para obter mais informações sobre como especificar versões mais novas, consulte Como especificar pacotes de fornecedores mais novos.

Tipo de conexão	Pacote
AWS Conexão	apache-airflow-providers-amazon[aiobotocore] ==9.0.0
Conexão com o Postgres	apache-airflow-providers-postgres==5.13.1
Conexão do FTP	apache-airflow-providers-ftp==3.11.1
Conexão Fab	apache-airflow-providers-fab==1.5.0
Conexão Celery	apache-airflow-providers-celery==3.8.3
Conexão do HTTP	apache-airflow-providers-http==4.13.2
Conexão do IMAP	apache-airflow-providers-imap==3.7.0
Comum SQL	apache-airflow-providers-common-sql==1.19.0
Conexão do SQLite	apache-airflow-providers-sqlite==3.9.0
Conexão do SMTP	apache-airflow-providers-smtp==1.8.0

Pacotes de provedores para conexões do Apache Airflow v2.10.1

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.10.1, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

nota

Tipo de conexão	Pacote
AWS Conexão	apache-airflow-providers-amazon[aiobotocore] == 8.28.0
Conexão com o Postgres	apache-airflow-providers-postgres==5.12.0
Conexão do FTP	apache-airflow-providers-ftp==3.11.0
Conexão Fab	apache-airflow-providers-fab==1.3.0
Conexão Celery	apache-airflow-providers-celery==3.8.1
Conexão do HTTP	apache-airflow-providers-http==4.13.0
Conexão do IMAP	apache-airflow-providers-imap==3.7.0
Comum SQL	apache-airflow-providers-common-sql==1.16.0
Conexão do SQLite	apache-airflow-providers-sqlite==3.9.0
Conexão do SMTP	apache-airflow-providers-smtp==1.8.0

Pacotes de provedores para conexões do Apache Airflow v2.9.2

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.9.2, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

nota

Tipo de conexão	Pacote
AWS Conexão	apache-airflow-providers-amazon[aiobotocore] ==8.24.0
Conexão com o Postgres	apache-airflow-providers-postgres==5.11.1
Conexão do FTP	apache-airflow-providers-ftp==3.9.1
Conexão Fab	apache-airflow-providers-fab==1.1.1
Conexão Celery	apache-airflow-providers-celery==3.7.2
Conexão do HTTP	apache-airflow-providers-http==4.11.1
Conexão do IMAP	apache-airflow-providers-imap==3.6.1
Comum SQL	apache-airflow-providers-common-sql==1.14.0
Conexão do SQLite	apache-airflow-providers-sqlite==3.8.1
Conexão do SMTP	apache-airflow-providers-smtp==1.7.1

Pacotes de provedores para conexões do Apache Airflow v2.8.1

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.8.1, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

nota

Tipo de conexão	Pacote
AWS Conexão	apache-airflow-providers-amazon[aiobotocore] == 8.16.0
Conexão com o Postgres	apache-airflow-providers-postgres==5.10.0
Conexão do FTP	apache-airflow-providers-ftp==3.7.0
Conexão Celery	apache-airflow-providers-celery==3.5.1
Conexão do HTTP	apache-airflow-providers-http==4.8.0
Conexão do IMAP	apache-airflow-providers-imap==3.5.0
Comum SQL	apache-airflow-providers-common-sql==1.10.0
Conexão do SQLite	apache-airflow-providers-sqlite==3.7.0

Pacotes de provedores para conexões Apache Airflow v2.7.2

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.7.2, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

nota

Tipo de conexão	Pacote
AWS Conexão	apache-airflow-providers-amazon[aiobotocore] == 8.7.1
Conexão com o Postgres	apache-airflow-providers-postgres==5.6.1
Conexão do FTP	apache-airflow-providers-ftp==3.5.2
Conexão Celery	apache-airflow-providers-celery==3.3.4
Conexão do HTTP	apache-airflow-providers-http==4.5.2
Conexão do IMAP	apache-airflow-providers-imap==3.3.2
Comum SQL	apache-airflow-providers-common-sql==1.7.2
Conexão do SQLite	apache-airflow-providers-sqlite==3.4.3

Pacotes de provedores para conexões Apache Airflow v2.6.3

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.6.3, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

nota

Tipo de conexão	Pacote
AWS Conexão	apache-airflow-providers-amazon[aiobotocore] ==8.2.0
Conexão com o Postgres	apache-airflow-providers-postgres==5.5.1
Conexão do FTP	apache-airflow-providers-ftp==3.4.2
Conexão Celery	apache-airflow-providers-celery==3.2.1
Conexão do HTTP	apache-airflow-providers-http==4.4.2
Conexão do IMAP	apache-airflow-providers-imap==3.2.2
Comum SQL	apache-airflow-providers-common-sql==1.5.2
Conexão do SQLite	apache-airflow-providers-sqlite==3.4.2

Pacotes de provedores para conexões Apache Airflow v2.5.1

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.5.1, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

nota

Tipo de conexão	Pacote
AWS Conexão	apache-airflow-providers-amazon==7.1.0
Conexão com o Postgres	apache-airflow-providers-postgres==5.4.0
Conexão do FTP	apache-airflow-providers-ftp==3.3.0
Conexão Celery	apache-airflow-providers-celery==3.1.0
Conexão do HTTP	apache-airflow-providers-http==4.1.1
Conexão do IMAP	apache-airflow-providers-imap==3.1.1
Comum SQL	apache-airflow-providers-common-sql==1.3.3
Conexão do SQLite	apache-airflow-providers-sqlite==3.3.1

Pacotes de provedores para conexões Apache Airflow v2.4.3

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.4.3, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

Tipo de conexão	Pacote
AWS Conexão	apache-airflow-providers-amazon==6.0.0
Conexão com o Postgres	apache-airflow-providers-postgres==5.2.2
Conexão do FTP	apache-airflow-providers-ftp==3.1.0
Conexão Celery	apache-airflow-providers-celery==3.0.0
Conexão do HTTP	apache-airflow-providers-http==4.0.0
Conexão do IMAP	apache-airflow-providers-imap==3.0.0
Comum SQL	apache-airflow-providers-common-sql==1.2.0
Conexão do SQLite	apache-airflow-providers-sqlite==3.2.1

Pacotes de provedores para conexões Apache Airflow v2.2.2

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.2.2, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

Tipo de conexão	Pacote
AWS Conexão	apache-airflow-providers-amazon==2.4.0
Conexão com o Postgres	apache-airflow-providers-postgres==2.3.0
Conexão do FTP	apache-airflow-providers-ftp==2.0.1
Conexão Celery	apache-airflow-providers-celery==2.1.0
Conexão do HTTP	apache-airflow-providers-http==2.0.1
Conexão do IMAP	apache-airflow-providers-imap==2.0.1
Conexão do SQLite	apache-airflow-providers-sqlite==2.0.1

Pacotes de provedores para conexões Apache Airflow v2.0.2

Quando você cria um MWAA ambiente Amazon no Apache Airflow v2.0.2, a MWAA Amazon instala os seguintes pacotes de provedores usados para conexões do Apache Airflow.

Tipo de conexão	Pacote
Conexão Tableau	apache-airflow-providers-tableau==1.0.0
Conexão Databricks	apache-airflow-providers-databricks==1.0.1
Conexão do SSH	apache-airflow-providers-ssh==1.3.0
Conexão com o Postgres	apache-airflow-providers-postgres==1.0.2
Conexão Docker	apache-airflow-providers-docker==1.2.0
Conexão Oracle	apache-airflow-providers-oracle==1.1.0
Conexão Presto	apache-airflow-providers-presto==1.0.2
Conexão do SFTP	apache-airflow-providers-sftp==1.2.0

Como especificar pacotes de fornecedores mais novos

A partir do Apache Airflow v2.7.2, seu arquivo de requisitos deve incluir uma declaração --constraint. Se você não fornecer uma restrição, a Amazon MWAA especificará uma para garantir que os pacotes listados em seus requisitos sejam compatíveis com a versão do Apache Airflow que você está usando.

Os arquivos de restrições do Apache Airflow especificam as versões do provedor disponíveis no momento de um lançamento do Apache Airflow. No entanto, em muitos casos os provedores mais novos são compatíveis com essa versão do Apache Airflow. Como você deve usar restrições, para especificar uma versão mais recente de um pacote de provedor, é possível modificar o arquivo de restrições para uma versão específica do provedor:

Baixe o arquivo de restrições específicas da versão em -3.11.txt” https://raw.githubusercontent.com/apache/ airflow/constraints-2.7.2/constraints
Modifique a versão apache-airflow-providers-amazon no arquivo de restrições para a versão que você deseja usar.
Salve o arquivo de restrições modificado na pasta dags do Amazon S3 do seu ambiente MWAA Amazon, por exemplo, como constraints-3.11-updated.txt
Especifique seus requisitos conforme mostrado a seguir.
```
--constraint "/usr/local/airflow/dags/constraints-3.11-updated.txt"

apache-airflow-providers-amazon==version-number
```
nota
Se você estiver usando um servidor web privado, recomendamos empacotar as bibliotecas necessárias como WHL arquivos usando o Amazon MWAA local-runner.

Atenção O Javascript está desativado ou não está disponível no seu navegador.

Para usar a documentação da AWS, o Javascript deve estar ativado. Consulte as páginas de Ajuda do navegador para obter instruções.

Convenções do documento

Como gerenciar conexões

Tipos de conexão