Pacchetti del provider Apache Airflow installati in ambienti Amazon MWAA

Amazon MWAA installa provider extra per i tipi di connessione Apache Airflow v2 e versioni successive quando crei un nuovo ambiente. L'installazione dei pacchetti del provider consente di visualizzare un tipo di connessione nell'interfaccia utente di Apache Airflow. Significa anche che non è necessario specificare questi pacchetti come dipendenza da Python nel file. requirements.txt Questa pagina elenca i pacchetti del provider Apache Airflow installati da Amazon MWAA per tutti gli ambienti Apache Airflow v2.

Nota

Per Apache Airflow v2 e versioni successive, Amazon MWAA installa la versione 2.0.1 di Watchtower dopo l'esecuzionepip3 install -r requirements.txt, per garantire che la compatibilità con la registrazione non venga sovrascritta da altre CloudWatch installazioni di librerie Python.

Indice

Pacchetti provider per connessioni Apache Airflow v2.10.3

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.10.3, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Nota

Puoi specificare l'ultima versione supportata di per aggiornare questo provider. apache-airflow-providers-amazon Per ulteriori informazioni su come specificare le versioni più recenti, vedere. Specificare pacchetti di provider più recenti

Tipo di connessione	Pacchetto
AWS Connessione	apache-airflow-providers-amazon[aiobotocore] ==9.0.0
Connessione Postgres	apache-airflow-providers-postgres==5.13.1
Connessione FTP	apache-airflow-providers-ftp==3.11.1
Connessione Fab	apache-airflow-providers-fab==1.5.0
Connessione Celery	apache-airflow-providers-celery==3.8.3
Connessione HTTP	apache-airflow-providers-http==4,13.2
Connessione IMAP	apache-airflow-providers-imap==3,7,0
Comune SQL	apache-airflow-providers-common-sql==1.19.0
Connessione SQLite	apache-airflow-providers-sqlite==3.9.0
Connessione SMTP	apache-airflow-providers-smtp==1.8.0

Pacchetti provider per connessioni Apache Airflow v2.10.1

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.10.1, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Nota

Tipo di connessione	Pacchetto
AWS Connessione	apache-airflow-providers-amazon[aiobotocore] ==8.28.0
Connessione Postgres	apache-airflow-providers-postgres==5.12.0
Connessione FTP	apache-airflow-providers-ftp==3.11.0
Connessione Fab	apache-airflow-providers-fab==1.3.0
Connessione Celery	apache-airflow-providers-celery==3.8.1
Connessione HTTP	apache-airflow-providers-http==4.13.0
Connessione IMAP	apache-airflow-providers-imap==3,7,0
Comune SQL	apache-airflow-providers-common-sql==1.16.0
Connessione SQLite	apache-airflow-providers-sqlite==3.9.0
Connessione SMTP	apache-airflow-providers-smtp==1.8.0

Pacchetti provider per connessioni Apache Airflow v2.9.2

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.9.2, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Nota

Tipo di connessione	Pacchetto
AWS Connessione	apache-airflow-providers-amazon[aiobotocore] ==8.24.0
Connessione Postgres	apache-airflow-providers-postgres==5.11.1
Connessione FTP	apache-airflow-providers-ftp==3,9,1
Connessione Fab	apache-airflow-providers-fab==1.1.1
Connessione Celery	apache-airflow-providers-celery==3.7.2
Connessione HTTP	apache-airflow-providers-http==4.11.1
Connessione IMAP	apache-airflow-providers-imap==3.6.1
Comune SQL	apache-airflow-providers-common-sql==1.14.0
Connessione SQLite	apache-airflow-providers-sqlite==3.8.1
Connessione SMTP	apache-airflow-providers-smtp==1.7.1

Pacchetti provider per connessioni Apache Airflow v2.8.1

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.8.1, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Nota

Tipo di connessione	Pacchetto
AWS Connessione	apache-airflow-providers-amazon[aiobotocore] ==8.16.0
Connessione Postgres	apache-airflow-providers-postgres==5.10.0
Connessione FTP	apache-airflow-providers-ftp==3,7,0
Connessione Celery	apache-airflow-providers-celery==3.5.1
Connessione HTTP	apache-airflow-providers-http==4.8.0
Connessione IMAP	apache-airflow-providers-imap==3,5,0
Comune SQL	apache-airflow-providers-common-sql==1.10.0
Connessione SQLite	apache-airflow-providers-sqlite==3,7,0

Pacchetti provider per connessioni Apache Airflow v2.7.2

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.7.2, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Nota

Tipo di connessione	Pacchetto
AWS Connessione	apache-airflow-providers-amazon[aiobotocore] ==8.7.1
Connessione Postgres	apache-airflow-providers-postgres==5.6.1
Connessione FTP	apache-airflow-providers-ftp==3,5,2
Connessione Celery	apache-airflow-providers-celery==3.3.4
Connessione HTTP	apache-airflow-providers-http==4,5,2
Connessione IMAP	apache-airflow-providers-imap==3.3.2
Comune SQL	apache-airflow-providers-common-sql==1.7.2
Connessione SQLite	apache-airflow-providers-sqlite==3.4.3

Pacchetti provider per connessioni Apache Airflow v2.6.3

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.6.3, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Nota

Tipo di connessione	Pacchetto
AWS Connessione	apache-airflow-providers-amazon[aiobotocore] ==8.2.0
Connessione Postgres	apache-airflow-providers-postgres==5.5.1
Connessione FTP	apache-airflow-providers-ftp==3,4,2
Connessione Celery	apache-airflow-providers-celery==3.2.1
Connessione HTTP	apache-airflow-providers-http==4.4.2
Connessione IMAP	apache-airflow-providers-imap==3.2.2
Comune SQL	apache-airflow-providers-common-sql==1.5.2
Connessione SQLite	apache-airflow-providers-sqlite==3.4.2

Pacchetti provider per connessioni Apache Airflow v2.5.1

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.5.1, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Nota

Tipo di connessione	Pacchetto
AWS Connessione	apache-airflow-providers-amazon==7.1.0
Connessione Postgres	apache-airflow-providers-postgres==5.4.0
Connessione FTP	apache-airflow-providers-ftp==3.3.0
Connessione Celery	apache-airflow-providers-celery==3.1.0
Connessione HTTP	apache-airflow-providers-http==4.1.1
Connessione IMAP	apache-airflow-providers-imap==3.1.1
Comune SQL	apache-airflow-providers-common-sql==1.3.3
Connessione SQLite	apache-airflow-providers-sqlite==3.3.1

Pacchetti provider per connessioni Apache Airflow v2.4.3

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.4.3, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Tipo di connessione	Pacchetto
AWS Connessione	apache-airflow-providers-amazon==6.0.0
Connessione Postgres	apache-airflow-providers-postgres==5.2.2
Connessione FTP	apache-airflow-providers-ftp==3,1,0
Connessione Celery	apache-airflow-providers-celery==3.0.0
Connessione HTTP	apache-airflow-providers-http==4,0
Connessione IMAP	apache-airflow-providers-imap==3,0,0
Comune SQL	apache-airflow-providers-common-sql==1.2.0
Connessione SQLite	apache-airflow-providers-sqlite==3.2.1

Pacchetti provider per connessioni Apache Airflow v2.2.2

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.2.2, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Tipo di connessione	Pacchetto
AWS Connessione	apache-airflow-providers-amazon==2.4.0
Connessione Postgres	apache-airflow-providers-postgres==2.3.0
Connessione FTP	apache-airflow-providers-ftp==2.0.1
Connessione Celery	apache-airflow-providers-celery==2.1.0
Connessione HTTP	apache-airflow-providers-http==2.0.1
Connessione IMAP	apache-airflow-providers-imap==20.1
Connessione SQLite	apache-airflow-providers-sqlite==20.1

Pacchetti provider per connessioni Apache Airflow v2.0.2

Quando crei un MWAA ambiente Amazon in Apache Airflow v2.0.2, MWAA Amazon installa i seguenti pacchetti di provider utilizzati per le connessioni Apache Airflow.

Tipo di connessione	Pacchetto
Connessione Tableau	apache-airflow-providers-tableau==1.0.0
Connessione Databricks	apache-airflow-providers-databricks==1.0.1
Connessione SSH	apache-airflow-providers-ssh==1,3,0
Connessione Postgres	apache-airflow-providers-postgres==1.0.2
Connessione Docker	apache-airflow-providers-docker==1.2.0
Collegamento Oracle	apache-airflow-providers-oracle==1.1.0
Connessione Presto	apache-airflow-providers-presto==1.0.2
Connessione SFTP	apache-airflow-providers-sftp==1.2.0

Specificare pacchetti di provider più recenti

A partire da Apache Airflow v2.7.2, il file dei requisiti deve includere una dichiarazione. --constraint Se non fornisci un vincolo, Amazon te ne MWAA specificherà uno per garantire che i pacchetti elencati nei tuoi requisiti siano compatibili con la versione di Apache Airflow che stai utilizzando.

I file dei vincoli di Apache Airflow specificano le versioni del provider disponibili al momento del rilascio di Apache Airflow. In molti casi, tuttavia, i provider più recenti sono compatibili con quella versione di Apache Airflow. Poiché è necessario utilizzare i vincoli, per specificare una versione più recente di un pacchetto provider, è possibile modificare il file dei vincoli per una versione specifica del provider:

Scaricate il file dei vincoli specifici della versione da -3.11.txt» https://raw.githubusercontent.com/apache/ airflow/constraints-2.7.2/constraints
Modifica la apache-airflow-providers-amazon versione nel file dei vincoli con la versione che desideri utilizzare.
Salva il file dei vincoli modificato nella cartella Amazon S3 dags del tuo ambiente MWAA Amazon, ad esempio come constraints-3.11-updated.txt
Specificate i vostri requisiti come illustrato di seguito.
```
--constraint "/usr/local/airflow/dags/constraints-3.11-updated.txt"

apache-airflow-providers-amazon==version-number
```
Nota
Se utilizzi un server Web privato, ti consigliamo di impacchettare le librerie richieste come WHL file utilizzando Amazon MWAA local-runner.

Avvertimento JavaScript è disabilitato o non è disponibile nel tuo browser.

Per usare la documentazione AWS, JavaScript deve essere abilitato. Consulta le pagine della guida del browser per le istruzioni.

Convenzioni dei documenti

Gestione delle connessioni

Tipi di connessione