Menggunakan replikasi SQL logis Postgre dengan Aurora

Untuk mengatur replikasi SQL logis Postgre untuk cluster DB Aurora Postgre SQL

1. Masuk ke AWS Management Console dan buka RDS konsol Amazon di https://console.aws.amazon.com/rds/.

2. Di panel navigasi, pilih cluster Aurora SQL Postgre DB Anda.

3. Buka tab Konfigurasi. Di antara detail Instans, temukan tautan Grup parameter dengan Grup parameter klaster DB untuk Jenis.

4. Pilih tautan untuk membuka parameter khusus yang terkait dengan cluster Aurora SQL Postgre DB Anda.

5. Di bidang pencarian Parameter, ketik rds untuk menemukan parameter rds.logical_replication. Nilai default untuk parameter ini adalah 0, artinya fitur dinonaktifkan secara default.

6. Pilih Edit parameter untuk mengakses nilai properti, lalu pilih 1 dari pemilih untuk mengaktifkan fitur tersebut. Tergantung penggunaan yang Anda harapkan, Anda mungkin juga perlu mengubah pengaturan parameter berikut. Namun, dalam banyak kasus, nilai default sudah cukup.

   • max_replication_slots – Tetapkan parameter ini ke nilai yang setidaknya sama dengan jumlah total publikasi dan langganan replikasi logis yang Anda rencanakan. Jika Anda menggunakan AWS DMS, parameter ini harus sama setidaknya dengan tugas pengambilan data perubahan yang direncanakan dari cluster, ditambah publikasi replikasi logis dan langganan.

   • max_wal_sendersdan max_logical_replication_workers — Tetapkan parameter ini ke nilai yang setidaknya sama dengan jumlah slot replikasi logis yang ingin Anda aktif, atau jumlah AWS DMS tugas aktif untuk pengambilan data perubahan. Membiarkan slot replikasi logis tidak aktif mencegah vakum menghilangkan tuple usang dari tabel, jadi kami sarankan Anda memantau slot replikasi dan menghapus slot yang tidak aktif sesuai kebutuhan.

   • max_worker_processes – Tetapkan parameter ini ke nilai yang setidaknya sama dengan total nilai max_logical_replication_workers, autovacuum_max_workers, dan max_parallel_workers. Pada kelas instans DB kecil, proses pekerja latar belakang dapat memengaruhi beban kerja aplikasi, jadi pantau performa basis data jika Anda menetapkan max_worker_processes lebih tinggi dari nilai default. (Nilai default adalah hasil dariGREATEST(${DBInstanceVCPU*2},8}, yang berarti bahwa, secara default, ini adalah 8 atau dua kali CPU setara dengan kelas instans DB, mana yang lebih besar).

   catatan

   Anda dapat mengubah nilai parameter dalam grup parameter DB buatan pelanggan; Anda tidak dapat mengubah nilai parameter dalam grup parameter DB default.

7. Pilih Simpan perubahan.

8. Reboot instance penulis cluster Aurora Postgre SQL DB Anda sehingga perubahan Anda berlaku. Di RDS konsol Amazon, pilih instans DB utama cluster dan pilih Reboot dari menu Tindakan.

9. Ketika instans tersedia, Anda dapat memverifikasi bahwa replikasi logis diaktifkan sebagai berikut.

   1. Gunakan psql untuk terhubung ke instance penulis cluster Aurora SQL Postgre DB Anda.

      psql --host=your-db-cluster-instance-1.aws-region.rds.amazonaws.com --port=5432 --username=postgres --password --dbname=labdb

   2. Verifikasi bahwa replikasi logis telah diaktifkan dengan menggunakan perintah berikut.

      labdb=> SHOW rds.logical_replication;
       rds.logical_replication
      -------------------------
       on
      (1 row)

   3. Verifikasi bahwa wal_level diatur ke logical.

      labdb=> SHOW wal_level;
        wal_level
      -----------
       logical
      (1 row)

Untuk menonaktifkan replikasi logis

1. Letakkan semua slot replikasi.

   Untuk menjatuhkan semua slot replikasi, sambungkan ke penerbit dan jalankan perintah berikutSQL.

   SELECT pg_drop_replication_slot(slot_name)
     FROM pg_replication_slots
    WHERE slot_name IN (SELECT slot_name FROM pg_replication_slots);

   Slot replikasi tidak dapat aktif saat Anda menjalankan perintah ini.

2. Ubah grup parameter klaster DB kustom yang terkait dengan penerbit seperti yang dijelaskan dalamMenyiapkan replikasi logis untuk cluster DB Aurora Postgre SQL Anda, tetapi atur parameter rds.logical_replication ke 0.

   Untuk informasi selengkapnya tentang grup parameter kustom, lihat Memodifikasi parameter dalam grup parameter cluster DB di Amazon Aurora.

3. Mulai ulang klaster DB Aurora SQL Postgre penerbit agar perubahan parameter diterapkanrds.logical_replication.

Untuk memulai proses replikasi logis antara dua cluster Aurora Postgre SQL DB

Langkah-langkah ini mengasumsikan bahwa cluster Aurora Postgre SQL DB Anda memiliki instance penulis dengan database untuk membuat tabel contoh.

1. Pada klaster Aurora Postgre DB SQL penerbit

   1. Buat tabel menggunakan SQL pernyataan berikut.

      CREATE TABLE LogicalReplicationTest (a int PRIMARY KEY);

   2. Masukkan data ke dalam database penerbit dengan menggunakan SQL pernyataan berikut.

      INSERT INTO LogicalReplicationTest VALUES (generate_series(1,10000));

   3. Verifikasi bahwa data ada dalam tabel dengan menggunakan SQL pernyataan berikut.

      SELECT count(*) FROM LogicalReplicationTest;

   4. Buat publikasi untuk tabel ini dengan menggunakan pernyataan CREATE PUBLICATION, sebagai berikut.

      CREATE PUBLICATION testpub FOR TABLE LogicalReplicationTest;

2. Pada pelanggan Aurora SQL Postgre DB cluster

   1. Buat tabel LogicalReplicationTest yang sama pada pelanggan yang Anda buat di penerbit, sebagai berikut.

      CREATE TABLE LogicalReplicationTest (a int PRIMARY KEY);

   2. Verifikasi bahwa tabel ini kosong.

      SELECT count(*) FROM LogicalReplicationTest;

   3. Buat langganan untuk mendapatkan perubahan dari penerbit. Anda perlu menggunakan detail berikut tentang klaster DB Aurora SQL Postgre penerbit.

      • host - Instans DB penulis klaster Aurora SQL Postgre DB penerbit.

      • port – Port tempat instans DB penulis mendengarkan. Default untuk Postgre SQL adalah 5432.

      • dbname – Nama basis data.

      CREATE SUBSCRIPTION testsub CONNECTION 
         'host=publisher-cluster-writer-endpoint port=5432 dbname=db-name user=user password=password' 
         PUBLICATION testpub; 
      

      catatan

      Tentukan kata sandi selain prompt yang ditampilkan di sini sebagai praktik keamanan terbaik.

      Setelah langganan dibuat, slot replikasi logis dibuat di penerbit.

   4. Untuk memverifikasi contoh ini bahwa data awal direplikasi pada pelanggan, gunakan SQL pernyataan berikut pada database pelanggan.

      SELECT count(*) FROM LogicalReplicationTest;

Untuk digunakan AWS DMS untuk replikasi logis dengan Aurora Postgre SQL

1. Siapkan database penerbit untuk AWS DMS dikerjakan.

   Untuk melakukan ini, Postgre SQL 10.x dan database yang lebih baru mengharuskan Anda menerapkan fungsi AWS DMS pembungkus ke database penerbit. Untuk detail tentang langkah ini dan yang lebih baru, lihat petunjuk di Menggunakan Postgre SQL versi 10.x dan yang lebih baru sebagai sumber AWS DMS di Panduan Pengguna.AWS Database Migration Service

2. Masuk ke AWS Management Console dan buka AWS DMS konsol dihttps://console.aws.amazon.com/dms/v2. Di kanan atas, pilih AWS Wilayah yang sama di mana penerbit dan pelanggan berada.

3. Buat contoh AWS DMS replikasi.

   Pilih nilai yang sama seperti nilai instans DB penulis dari penerbit Anda. Hal ini termasuk pengaturan berikut:

   • Untuk VPC, pilih yang sama VPC seperti untuk instance DB penulis.

   • Untuk Grup Subnet Replikasi, pilih grup subnet dengan nilai yang sama dengan instans DB penulis. Buat yang baru jika perlu.

   • Untuk Zona ketersediaan, pilih zona yang sama seperti untuk instans DB penulis.

   • Untuk Grup VPC Keamanan, pilih grup yang sama dengan instans DB penulis.

4. Buat AWS DMS titik akhir untuk sumbernya.

   Tentukan penerbit sebagai titik akhir sumber dengan menggunakan pengaturan berikut:

   • Untuk Jenis titik akhir, pilih Titik akhir sumber.

   • Pilih Pilih Instans RDS DB.

   • RDSMisalnya, pilih pengenal DB dari instans DB penulis penerbit.

   • Untuk Mesin sumber, pilih postgres.

5. Buat AWS DMS titik akhir untuk target.

   Tentukan pelanggan sebagai titik akhir target dengan menggunakan pengaturan berikut:

   • Untuk Jenis titik akhir, pilih Titik akhir target.

   • Pilih Pilih Instans RDS DB.

   • RDSMisalnya, pilih pengenal DB dari instans DB pelanggan.

   • Pilih nilai untuk Mesin sumber. Misalnya, jika pelanggan adalah SQL database RDS Postgre, pilih postgres. Jika pelanggan adalah database Aurora SQL Postgre, pilih aurora-postgresql.

6. Buat tugas migrasi AWS DMS database.

   Gunakan tugas migrasi basis data untuk menentukan tabel basis data yang akan dimigrasi, memetakan data menggunakan skema target, dan membuat tabel baru pada basis data target. Setidaknya, gunakan pengaturan berikut untuk Konfigurasi tugas:

   • Untuk Instans replikasi, pilih instans replikasi yang Anda buat pada langkah sebelumnya.

   • Untuk Titik akhir basis data sumber, pilih sumber penerbit yang Anda buat pada langkah sebelumnya.

   • Untuk Titik akhir basis data target, pilih target pelanggan yang Anda buat pada langkah sebelumnya.

   Detail tugas lainnya tergantung pada proyek migrasi Anda. Untuk informasi selengkapnya tentang menentukan semua detail DMS tugas, lihat Bekerja dengan AWS DMS tugas di Panduan AWS Database Migration Service Pengguna.