以 Aurora 使用 PostgreSQL 邏輯複寫

針對 Aurora PostgreSQL 資料庫叢集設定 PostgreSQL 邏輯複寫

1. 登入 AWS Management Console，並開啟 Amazon RDS 主控台，網址為 https://console.aws.amazon.com/rds/。

2. 在導覽窗格中，選擇 Aurora PostgreSQL 資料庫叢集。

3. 開啟 Configuration (組態) 索引標籤。在執行個體詳細資訊中找出參數群組連結，並於類型清單中選擇資料庫叢集參數群組。

4. 選擇連結以開啟與 Aurora PostgreSQL 資料庫叢集相關聯的連結。

5. 在 Parameters (參數) 搜尋欄位中，輸入 rds 以尋找 rds.logical_replication 參數。此參數的預設值為 0，表示預設為關閉。

6. 選擇 Edit parameters (編輯參數) 以存取屬性值，然後從選取器中選擇 1 以開啟功能。根據您預期的使用情況，您可能也需要變更下列參數的設定。不過，在許多情況下，預設值就足夠了。

   • max_replication_slots – 將此參數設定為至少等於您規劃之邏輯複寫發佈與訂閱總數的值。如果您正在使用 AWS DMS，此參數至少應等於叢集中規劃的變更資料擷取任務，再加上邏輯複寫發佈和訂閱。

   • max_wal_senders 和 max_logical_replication_workers - 將這些參數設定為至少等於您打算啟用的邏輯複寫槽數目，或用於擷取變更資料的作用中 AWS DMS 任務數目。讓邏輯複寫槽處於非作用中會導致清理無法從資料表移除已淘汰的元組，因此建議您監控複寫槽並視需要移除非作用中的複寫槽。

   • max_worker_processes – 將此參數設定為至少等於 max_logical_replication_workers、autovacuum_max_workers、和 max_parallel_workers 值總計的值。在小型資料庫執行個體類別上，背景工作者程序可能影響應用程式工作負載，因此，如果您將 max_worker_processes 設為高於預設值，請監控資料庫的效能。(預設值是 GREATEST(${DBInstanceVCPU*2},8} 的結果，表示依預設，這是 8 或是資料庫執行個體類別對等 CPU 的兩倍，以較大者為準)。

   注意

   您可修改客戶建立的資料庫參數群組中的參數值；但無法變更預設資料庫參數群組中的參數值。

7. 選擇儲存變更。

8. 重新啟動 Aurora PostgreSQL 資料庫叢集的寫入器執行個體，以便您的變更生效。在 Amazon RDS 主控台中，選擇叢集的主要資料庫執行個體，然後從 Actions (動作) 中選擇 Reboot (重新啟動)。

9. 當執行個體可用時，您可以驗證邏輯複寫是否已開啟，如下所示。

   1. 使用 psql 連線到 Aurora PostgreSQL 資料庫叢集的寫入器執行個體。

      psql --host=your-db-cluster-instance-1.aws-region.rds.amazonaws.com --port=5432 --username=postgres --password --dbname=labdb

   2. 使用下列命令驗證是否已啟用邏輯複寫。

      labdb=> SHOW rds.logical_replication;
       rds.logical_replication
      -------------------------
       on
      (1 row)

   3. 驗證 wal_level 是否已設為 logical。

      labdb=> SHOW wal_level;
        wal_level
      -----------
       logical
      (1 row)

關閉邏輯複寫

1. 捨棄所有複寫槽。

   若要捨棄所有複寫槽，請連線到發佈者，然後執行下列 SQL 命令。

   SELECT pg_drop_replication_slot(slot_name)
     FROM pg_replication_slots
    WHERE slot_name IN (SELECT slot_name FROM pg_replication_slots);

   執行此命令時，複寫槽不能處於作用中。

2. 如 針對 Aurora PostgreSQL 資料庫叢集設定邏輯複寫 所述，修改與發佈者相關聯的自訂資料庫叢集參數群組，但將 rds.logical_replication 參數設為 0。

   如需自訂參數群組的詳細資訊，請參閱 修改資料庫叢集參數群組中的參數。

3. 重新啟動發佈者 Aurora PostgreSQL 資料庫叢集，使 rds.logical_replication 參數的變更生效。

在兩個 Aurora PostgreSQL 資料庫叢集之間啟動邏輯複寫程序

這些步驟假設您的 Aurora PostgreSQL 資料庫叢集具有一個寫入器執行個體，其中包含可在其中建立範例資料表的資料庫。

1. 在發佈者 Aurora PostgreSQL 資料庫叢集上

   1. 使用下列 SQL 陳述式建立資料表。

      CREATE TABLE LogicalReplicationTest (a int PRIMARY KEY);

   2. 使用下列 SQL 陳述式，將資料插入發佈者資料庫。

      INSERT INTO LogicalReplicationTest VALUES (generate_series(1,10000));

   3. 使用下列 SQL 陳述式，驗證資料是否存在於資料表中。

      SELECT count(*) FROM LogicalReplicationTest;

   4. 使用 CREATE PUBLICATION 陳述式建立此資料表的發佈，如下所示。

      CREATE PUBLICATION testpub FOR TABLE LogicalReplicationTest;

2. 在訂閱者 Aurora PostgreSQL 資料庫叢集上

   1. 在訂閱者上建立您已在發佈者上建立的相同 LogicalReplicationTest 資料表，如下所示。

      CREATE TABLE LogicalReplicationTest (a int PRIMARY KEY);

   2. 驗證此資料表是否為空的。

      SELECT count(*) FROM LogicalReplicationTest;

   3. 建立訂閱以從發佈者取得變更。您必須使用有關發佈者 Aurora PostgreSQL 資料庫叢集的下列詳細資訊。

      • host – 發佈者 Aurora PostgreSQL 資料庫叢集的寫入器資料庫執行個體。

      • port – 寫入器資料庫執行個體正在聆聽的連接埠。PostgreSQL 的預設值為 5432。

      • dbname – 資料庫的名稱。

      CREATE SUBSCRIPTION testsub CONNECTION 
         'host=publisher-cluster-writer-endpoint port=5432 dbname=db-name user=user password=password' 
         PUBLICATION testpub; 
      

      注意

      指定此處所顯示提示以外的密碼，作為安全最佳實務。

      建立訂閱後，發佈者會建立一個邏輯複寫槽。

   4. 對於本範例，若要驗證初始資料已複寫在訂閱者上，請對訂閱者資料庫使用下列 SQL 陳述式。

      SELECT count(*) FROM LogicalReplicationTest;

使用 AWS DMS 搭配 Aurora PostgreSQL 進行邏輯複寫

1. 準備發佈者資料庫使用 AWS DMS。

   若要這麼做，PostgreSQL 10.x 和以上版本的資料庫要求您將 AWS DMS 包裝函式套用於發佈者資料庫。如需此步驟和稍後步驟的詳細資訊，請參閱 AWS Database Migration Service 使用者指南中的使用 PostgreSQL 10.x 和以上版本作為 AWS DMS 的來源。

2. 登入 AWS Management Console 並於 AWS DMS 開啟 https://console.aws.amazon.com/dms/v2 主控台。在右上角，選擇發佈者和訂閱者所在的同一個 AWS 區域。

3. 建立 AWS DMS 複寫執行個體。

   選擇與發佈者的寫入器資料庫執行個體相同的值。這些值包括下列設定：

   • 在 VPC 中，選擇與寫入器資料庫執行個體相同的 VPC。

   • 針對 Replication Subnet Group (複寫子網路群組)，選擇值同於寫入器資料庫執行個體的子網路群組。必要時，建立新的子網路群組。

   • 在 Availability zone (可用區域) 中，選擇與寫入器資料庫執行個體相同的區域。

   • 在 VPC Security Group (VPC 安全群組) 中，請選擇與寫入器資料庫執行個體相同的群組。

4. 為來源建立一個 AWS DMS 端點。

   使用下列設定，將發佈者指定為來源端點︰

   • 在 Endpoint type (端點類型) 中，選擇 Source (來源)。

   • 選擇 Select RDS DB Instance (選取 RDS 資料庫執行個體)。

   • 在 RDS Instance (RDS 執行個體) 中，選擇發佈者的寫入器資料庫執行個體的資料庫標識符。

   • 在 Source engine (來源引擎) 中，選擇 postgres。

5. 為目標建立一個 AWS DMS 端點。

   使用下列設定，將發佈者指定為目標端點︰

   • 在 Endpoint type (端點類型) 中，選擇 Target (目標)。

   • 選擇 Select RDS DB Instance (選取 RDS 資料庫執行個體)。

   • 在 RDS Instance (RDS 執行個體) 中，選擇發佈者資料庫執行個體的資料庫識別符。

   • 在 Source engine (來源引擎) 中選擇一個值。例如，如果訂閱者為一 RDS PostgreSQL 資料庫，則選擇 postgres。如果訂閱者是 Aurora PostgreSQL 資料庫，請選擇 aurora-postgresql。

6. 建立 AWS DMS 資料庫遷移任務。

   您使用資料庫遷移任務指定要遷移哪一個資料庫資料表，使用目標結構描述映射資料，並於目標資料庫上建立新資料表。至少將下列設定使用於 Task configuration (任務組態)：

   • 在 Replication instance (複寫執行個體) 中，選擇您在先前步驟中建立的複寫執行個體。

   • 在 Source database endpoint (來源資料庫端點) 中，選擇您在先前步驟中建立的發佈者來源。

   • 在 Target database endpoint (目標資料庫端點) 中，選擇您在先前步驟中建立的訂閱者目標。

   其餘的任務細節端視您的遷移專案而定。如需指定 DMS 任務所有細節的詳細資訊，請參閱 AWS Database Migration Service 使用者指南中的使用 AWS DMS 任務。