安装在 Amazon MWAA 环境中的 Apache Airflow 提供程序包
当您创建新环境时，Amazon MWAA 会为 Apache Airflow v2 及更高版本的连接类型安装提供程序 Extrasrequirements.txt 文件中将这些程序包指定为 Python 依赖项。本页列出了 Amazon MWAA 为所有 Apache Airflow v2 环境安装的 Apache Airflow 提供程序包。
注意
对于 Apache Airflow v2 及更高版本，Amazon MWAA 在执行 pip3 install -r requirements.txt 后会安装 Watchtower 版本 2.0.1
目录
Apache Airflow v2.10.1 连接的提供程序包
当您在 Apache Airflow v2.10.1 中创建 Amazon MWAA 环境时，Amazon MWAA 会安装以下用于 Apache Airflow 连接的提供程序包。
注意
您可以指定支持的 apache-airflow-providers-amazon 的最新版本来升级此提供程序。有关指定更新版本的更多信息，请参阅 指定更新的提供程序包。
| 连接类型 | 软件包 |
|---|---|
|
AWS 连接 |
|
|
Postgres 连接 |
|
|
FTP 连接 |
|
|
Fab 连接 |
|
|
Celery 连接 |
|
|
HTTP 连接 |
|
|
IMAP 连接 |
|
|
常见 SQL |
|
|
SQLite 连接 |
|
|
SMTP 连接 |
Apache Airflow v2.9.2 连接的提供程序包
在 Apache Airflow v2.9.2 中创建 Amazon MWAA 环境时，Amazon MWAA 会安装以下用于 Apache Airflow 连接的提供程序包。
注意
您可以指定支持的 apache-airflow-providers-amazon 的最新版本来升级此提供程序。有关指定更新版本的更多信息，请参阅 指定更新的提供程序包。
| 连接类型 | 软件包 |
|---|---|
|
AWS 连接 |
|
|
Postgres 连接 |
|
|
FTP 连接 |
|
|
Fab 连接 |
|
|
Celery 连接 |
|
|
HTTP 连接 |
|
|
IMAP 连接 |
|
|
常见 SQL |
|
|
SQLite 连接 |
|
|
SMTP 连接 |
Apache Airflow v2.8.1 连接的提供程序包
当您在 Apache Airflow v2.8.1 中创建 Amazon MWAA 环境时，Amazon MWAA 会安装以下用于 Apache Airflow 连接的提供程序包。
注意
您可以指定支持的 apache-airflow-providers-amazon 的最新版本来升级此提供程序。有关指定更新版本的更多信息，请参阅 指定更新的提供程序包。
| 连接类型 | 软件包 |
|---|---|
|
AWS 连接 |
|
|
Postgres 连接 |
|
|
FTP 连接 |
|
|
Celery 连接 |
|
|
HTTP 连接 |
|
|
IMAP 连接 |
|
|
常见 SQL |
|
|
SQLite 连接 |
Apache Airflow v2.7.2 连接的提供程序包
当您在 Apache Airflow v2.7.2 中创建 Amazon MWAA 环境时，Amazon MWAA 会安装以下用于 Apache Airflow 连接的提供程序包。
注意
您可以指定支持的 apache-airflow-providers-amazon 的最新版本来升级此提供程序。有关指定更新版本的更多信息，请参阅 指定更新的提供程序包。
| 连接类型 | 软件包 |
|---|---|
|
AWS 连接 |
|
|
Postgres 连接 |
|
|
FTP 连接 |
|
|
Celery 连接 |
|
|
HTTP 连接 |
|
|
IMAP 连接 |
|
|
常见 SQL |
|
|
SQLite 连接 |
Apache Airflow v2.6.3 连接的提供程序包
当您在 Apache Airflow v2.6.3 中创建 Amazon MWAA 环境时，Amazon MWAA 会安装以下用于 Apache Airflow 连接的提供程序包。
注意
您可以指定支持的 apache-airflow-providers-amazon 的最新版本来升级此提供程序。有关指定更新版本的更多信息，请参阅 指定更新的提供程序包。
| 连接类型 | 软件包 |
|---|---|
|
AWS 连接 |
|
|
Postgres 连接 |
|
|
FTP 连接 |
|
|
Celery 连接 |
|
|
HTTP 连接 |
|
|
IMAP 连接 |
|
|
常见 SQL |
|
|
SQLite 连接 |
Apache Airflow v2.5.1 连接的提供程序包
当您在 Apache Airflow v2.5.1 中创建 Amazon MWAA 环境时，Amazon MWAA 会安装以下用于 Apache Airflow 连接的提供程序包。
注意
您可以指定支持的 apache-airflow-providers-amazon 的最新版本来升级此提供程序。有关指定更新版本的更多信息，请参阅 指定更新的提供程序包。
| 连接类型 | 软件包 |
|---|---|
|
AWS 连接 |
|
|
Postgres 连接 |
|
|
FTP 连接 |
|
|
Celery 连接 |
|
|
HTTP 连接 |
|
|
IMAP 连接 |
|
|
常见 SQL |
|
|
SQLite 连接 |
Apache Airflow v2.4.3 连接的提供程序包
当您在 Apache Airflow v2.4.3 中创建 Amazon MWAA 环境时，Amazon MWAA 会安装以下用于 Apache Airflow 连接的提供程序包。
| 连接类型 | 软件包 |
|---|---|
|
AWS 连接 |
|
|
Postgres 连接 |
|
|
FTP 连接 |
|
|
Celery 连接 |
|
|
HTTP 连接 |
|
|
IMAP 连接 |
|
|
常见 SQL |
|
|
SQLite 连接 |
Apache Airflow v2.2.2 连接的提供程序包
当您在 Apache Airflow v2.2.2 中创建 Amazon MWAA 环境时，Amazon MWAA 会安装以下用于 Apache Airflow 连接的提供程序包。
| 连接类型 | 软件包 |
|---|---|
|
AWS 连接 |
|
|
Postgres 连接 |
|
|
FTP 连接 |
|
|
Celery 连接 |
|
|
HTTP 连接 |
|
|
IMAP 连接 |
|
|
SQLite 连接 |
Apache Airflow v2.0.2 连接的提供程序包
当您在 Apache Airflow v2.0.2 中创建 Amazon MWAA 环境时，Amazon MWAA 会安装以下用于 Apache Airflow 连接的提供程序包。
| 连接类型 | 软件包 |
|---|---|
|
Tableau |
|
|
Databricks 连接 |
|
|
SSH 连接 |
|
|
Postgres 连接 |
|
|
Docker 连接 |
|
|
Oracle 连接 |
|
|
Presto 连接 |
|
|
SFTP 连接 |
指定更新的提供程序包
从 Apache Airflow v2.7.2 开始，要求文件必须包含一条 --constraint 语句。如果您未提供约束条件，Amazon MWAA 将为您指定一个约束条件，以确保您的要求中列出的程序包与您正在使用的 Apache Airflow 版本兼容。
Apache Airflow 约束文件指定了 Apache Airflow 发布时可用的提供程序版本。但是，在许多情况下，较新的提供程序与该版本的 Apache Airflow 兼容。由于必须使用约束条件，因此要指定提供程序包的较新版本，因此可以修改特定提供程序版本的约束文件：
-
从 https://raw.githubusercontent.com/apache/airflow/constraints-2.7.2/constraints-3.11.txt"
下载特定版本的约束文件 -
将约束文件中的
apache-airflow-providers-amazon版本修改为要使用的版本。 -
将修改后的约束文件另存到 Amazon MWAA 环境的 Amazon S3 DAGs 文件夹，例如
constraints-3.11-updated.txt -
如下所示，指定您的要求。
--constraint "/usr/local/airflow/dags/constraints-3.11-updated.txt" apache-airflow-providers-amazon==version-number注意
如果您使用的是私有 Web 服务器，我们建议您使用 Amazon MWAA 本地运行程序
将所需的库打包为 WHL 文件。
