搭配 使用自訂連接器和連線 AWS Glue Studio - AWS Glue

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

搭配 使用自訂連接器和連線 AWS Glue Studio

AWS Glue 使用 JDBC連線為最常用的資料存放區 (例如 Amazon Redshift、Amazon Aurora、Microsoft SQL Server、MySQL、MongoDB 和 PostgreSQL) 提供內建支援。AWS Glue 也可讓您在擷取、轉換和載入 (ETL) 任務中使用自訂JDBC驅動程式。對於原生不支援的資料存放區 (例如 SaaS 應用程式),您可以使用連接器。

連接器是選用的程式碼套件,可協助存取 中的資料存放區 AWS Glue Studio。 您可以訂閱 提供的多個連接器 AWS Marketplace。

建立ETL任務時,您可以使用原生支援的資料存放區 AWS Marketplace、來自 的連接器或您自己的自訂連接器。如果您使用連接器,則必須先為連接器建立連線。連線包含連到特定資料存放區所需的屬性。您可以在ETL任務中使用與資料來源和資料目標的連線。連接器和連線搭配運作,以方便存取資料存放區。

建立連接器的連線時,可使用下列連線:

  • Amazon Aurora:可擴展的高效能關聯式資料庫引擎,具備內建安全、備份與還原,以及記憶體加速功能。

  • Amazon DocumentDB – 可擴展、高可用性和全受管的文件資料庫服務,支援 MongoDB 和 SQL APIs。

  • Amazon Redshift – 可擴展、高可用性且全受管的文件資料庫服務,支援 MongoDB 和 SQL APIs。

  • Azure SQL – Microsoft Azure 的雲端型關聯式資料庫服務,可提供可擴展、可靠且安全的資料儲存和管理功能。

  • Cosmos DB:Microsoft Azure 的全域分佈雲端資料庫服務,能提供可擴展、高效能的資料儲存和查詢功能。

  • Google BigQuery – 無伺服器雲端資料倉儲,可在大型資料集上執行快速SQL查詢。

  • JDBC – 關聯式資料庫管理系統 (RDBMS),使用 Java API 來連接資料連線並與之互動。

  • Kafka:用於即時資料串流和傳訊的開放原始碼串流處理平台。

  • MariaDB – My 社群開發的SQL分支,可提供增強的效能、可擴展性和功能。

  • MongoDB:跨平台的文件導向資料庫,可提供高擴展性、彈性及效能。

  • MongoDB Atlas – MongoDB 提供的雲端資料庫即服務 (DBaaS),可簡化 MongoDB 部署的管理和擴展。

  • Microsoft SQL Server – Microsoft 的關聯式資料庫管理系統 (RDBMS),可提供強大的資料儲存、分析和報告功能。

  • Mixpanel – 一種分析平台,可協助企業分析使用者與其網站、行動應用程式和其他數位產品的互動方式。

  • MySQL – 開放原始碼關聯式資料庫管理系統 (RDBMS),廣泛用於 Web 應用程式,以其可靠性和可擴展性著稱。

  • 網路:網路資料來源表示可由資料整合平台存取的網路存取資源或服務。

  • OpenSearch – OpenSearch 資料來源是一種應用程式, OpenSearch 可連線至 並從中擷取資料。

  • Oracle – Oracle Corporation 的關聯式資料庫管理系統 (RDBMS),可提供強大的資料儲存、分析和報告功能。

  • PostgreSQL – 開放原始碼關聯式資料庫管理系統 (RDBMS),可提供強大的資料儲存、分析和報告功能。

  • Salesforce – Salesforce 提供客戶關係管理 (CRM) 軟體,可協助您處理銷售、客戶服務、電子商務等。如果您是 Salesforce 使用者,您可以 AWS Glue 連線至您的 Salesforce 帳戶。然後,您可以在ETL任務中使用 Salesforce 做為資料來源或目的地。執行這些任務,以在 Salesforce AWS 和服務或其他支援的應用程式之間傳輸資料。

  • SAP HANA – 記憶體內資料庫和分析平台,可提供快速資料處理、進階分析和即時資料整合。

  • Snowflake:雲端型資料倉儲,可提供可擴展、高效能的資料儲存和分析服務。

  • Teradata – 關聯式資料庫管理系統 (RDBMS),可提供高效能的資料儲存、分析和報告功能。

  • Vertica:專為大數據分析而設計的欄式導向分析資料倉儲,可提供快速的查詢效能、進階分析和可擴展性。