本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
適用於 Apache 氣流的 Amazon 受管工作流程程式
本指南包含可用於 Apache Airflow 環境之 Amazon 受管工作流程的程式碼範例 (包括DAGs和自訂外掛程式)。如需將 Apache 氣流與 AWS 服務搭配使用的更多範例,請參閱 Apache 氣流 GitHub 儲存庫中的dags
範例
- 使用 a DAG 匯入中的變數 CLI
- 使用建立SSH連線 SSHOperator
- 使用一個秘密密鑰 AWS Secrets Manager 為 Apache 氣流雪花連接
- 使用在DAG中寫入自訂指標 CloudWatch
- Aurora 後在 Amazon SQL MWAA 環境上清理數據庫
- 將環境中繼資料匯出到 Amazon S3 上的CSV檔案
- AWS Secrets Manager 對於 Apache 氣流變量使用秘密密鑰
- 在 中使用秘密金鑰 AWS Secrets Manager 進行 Apache Airflow 連線
- 使用 Oracle 創建一個自定義插件
- 建立產生執行階段環境變數的自訂外掛程式
- 在 Amazon 上更改 a DAG 的時區 MWAA
- 刷新令 CodeArtifact 牌
- 創建一個自定義插件與阿帕奇蜂巢和 Hadoop
- 為 Apache 氣流創建一個自定義插件 PythonVirtualenvOperator
- DAGs使用 Lambda 函數調用
- DAGs在不同的 Amazon MWAA 環境中調用
- 使用 Amazon MWAA 與 Amazon Microsoft RDS 服SQL務器
- 將 Amazon MWAA與 Amazon 搭配使用 EMR
- 使用 Amazon MWAA 與 Amazon EKS
- 連接到 Amazon ECS 使用 ECSOperator
- 在 Amazon 上使用 dbt MWAA
- AWS 博客和教程