Menggunakan integrasi nol-ETL Aurora dengan Amazon Redshift

Membantu Anda memperoleh wawasan menyeluruh dari berbagai sumber data.

Menghilangkan kebutuhan untuk membangun dan memelihara pipeline data yang kompleks yang melakukan operasi extract, transform, and load (ETL). Integrasi nol-ETL menghilangkan tantangan yang muncul dalam membangun dan mengelola pipeline dengan menyediakan dan mengelolanya untuk Anda.

Mengurangi beban dan biaya operasional, serta membantu Anda fokus pada peningkatan aplikasi Anda.

Memungkinkan Anda memanfaatkan analitik Amazon Redshift dan kemampuan ML untuk memperoleh wawasan dari data transaksional dan data lainnya, guna merespons secara efektif peristiwa kritis dan sensitif terhadap waktu.

Cluster DB sumber harus berada di Wilayah yang sama dengan gudang data Amazon Redshift target.

Anda tidak dapat mengganti nama cluster DB atau instance-nya jika memiliki integrasi yang ada.

Anda tidak dapat menghapus cluster DB yang memiliki integrasi yang ada. Anda harus menghapus semua integrasi yang terkait terlebih dahulu.

Jika Anda menghentikan cluster DB sumber, beberapa transaksi terakhir mungkin tidak direplikasi ke gudang data target sampai Anda melanjutkan cluster .

Jika kluster Anda adalah sumber penerapan biru/hijau, lingkungan biru dan hijau tidak dapat memiliki integrasi nol-ETL selama peralihan. Anda harus menghapus integrasi tersebut terlebih dahulu dan beralih, lalu membuat ulang integrasi.

Cluster DB harus berisi setidaknya satu instans DB untuk menjadi sumber integrasi.

Jika klaster sumber Anda adalah klaster DB primer dalam basis data global Aurora dan melakukan failover ke salah satu klaster sekundernya, integrasi menjadi tidak aktif. Anda harus menghapus dan membuat ulang integrasi.

Anda tidak dapat membuat integrasi untuk database sumber yang memiliki integrasi lain yang sedang dibuat secara aktif.

Saat Anda pertama kali membuat integrasi, atau ketika tabel sedang disinkronkan ulang, seeding data dari sumber ke target dapat memakan waktu 20-25 menit atau lebih tergantung ukuran basis data sumber. Penundaan ini dapat menyebabkan peningkatan lag replika.

Beberapa jenis data tidak didukung. Untuk informasi selengkapnya, lihat Perbedaan jenis data antara basis data Aurora dan Amazon Redshift.

Referensi kunci asing dengan pembaruan tabel yang telah ditentukan sebelumnya tidak didukung. Secara khusus, ON DELETE dan ON UPDATE aturan tidak didukung denganCASCADE,SET NULL, dan SET DEFAULT tindakan. Mencoba membuat atau memperbarui tabel dengan referensi tersebut ke tabel lain akan menempatkan tabel ke dalam keadaan gagal.

Operasi partisi ALTER TABLE menyebabkan tabel Anda melakukan sinkronisasi ulang untuk memuat ulang data dari Aurora ke Amazon Redshift. Tabel tidak akan tersedia untuk kueri saat disinkronkan ulang. Untuk informasi selengkapnya, lihat Satu atau beberapa tabel Amazon Redshift saya memerlukan sinkronisasi ulang.

Transaksi XA tidak didukung.

Pengidentifikasi objek (termasuk nama basis data, nama tabel, nama kolom, dan lainnya) hanya dapat berisi karakter alfanumerik, angka, $, dan _ (garis bawah).

Cluster DB sumber Anda harus menjalankan Aurora MySQL versi 3.05 (kompatibel dengan MySQL 8.0.32) atau lebih tinggi.

Integrasi nol-ETL mengandalkan pencatatan log biner MySQL (binlog) untuk mengambil perubahan data yang sedang berlangsung. Jangan gunakan pemfilteran data berbasis binlog, karena dapat menyebabkan inkonsistensi data antara basis data sumber dan target.

Tabel sistem, tabel sementara, dan tampilan Aurora MySQL tidak direplikasi ke Amazon Redshift.

Integrasi nol-ETL didukung hanya untuk basis data yang dikonfigurasi untuk menggunakan mesin penyimpanan InnoDB.

Klaster DB sumber Anda harus menjalankan Aurora PostgreSQL (kompatibel dengan PostgreSQL 15.4 dan Dukungan Nol-ETL).

Anda dapat membuat dan mengelola integrasi nol-ETL untuk Aurora PostgreSQL hanya di Lingkungan Pratinjau Database Amazon RDS, di Timur AS (Ohio) (us-east-2). Wilayah AWS Anda dapat menggunakan lingkungan pratinjau untuk menguji versi beta, versi kandidat rilis, dan versi produksi awal perangkat lunak mesin basis data PostgreSQL.

Anda dapat membuat dan mengelola integrasi untuk Aurora PostgreSQL hanya menggunakan AWS Management Console. Anda tidak dapat menggunakan AWS Command Line Interface (AWS CLI), Amazon RDS API, atau AWS SDK mana pun.

Saat Anda membuat klaster DB sumber, grup parameter yang Anda pilih harus sudah mengonfigurasi nilai parameter klaster DB yang diperlukan. Anda tidak dapat membuat grup parameter baru setelahnya lalu mengaitkannya dengan klaster. Untuk daftar parameter yang diperlukan, lihat Langkah 1: Buat grup parameter klaster DB kustom.

Anda tidak dapat memodifikasi integrasi setelah Anda membuatnya. Jika perlu mengubah pengaturan tertentu, Anda harus menghapus dan membuat ulang integrasi.

Saat ini, klaster DB Aurora PostgreSQL yang merupakan sumber integrasi tidak melakukan pengumpulan sampah data replikasi logis.

Semua basis data yang dibuat dalam klaster DB Aurora PostgreSQL sumber harus menggunakan pengenkodean UTF-8.

Nama kolom tidak dapat berisi salah satu karakter berikut: koma (,), titik koma (;), tanda kurung (), kurung kurawal {}, baris baru (\n), tab (\ t), tanda sama dengan (=), dan spasi.

Integrasi nol-ETL dengan Aurora PostgreSQL tidak mendukung hal berikut ini: