Memulai gudang data yang disediakan Amazon Redshift

Jika Anda adalah pengguna pertama kali Amazon Redshift, kami sarankan Anda membaca bagian berikut untuk membantu Anda mulai menggunakan kluster yang disediakan. Alur dasar Amazon Redshift adalah membuat sumber daya yang disediakan, terhubung ke Amazon Redshift, memuat data sampel, dan kemudian menjalankan kueri pada data. Dalam panduan ini, Anda dapat memilih untuk memuat data sampel dari Amazon Redshift atau dari bucket Amazon S3. Data sampel digunakan di seluruh dokumentasi Amazon Redshift untuk mendemonstrasikan fitur.

Tutorial ini menunjukkan cara menggunakan kluster yang disediakan Amazon Redshift, yang merupakan objek gudang data tempat AWS Anda mengelola sumber daya sistem. Anda juga dapat menggunakan Amazon Redshift dengan grup kerja tanpa server, yang merupakan objek gudang data yang diskalakan secara otomatis sebagai respons terhadap penggunaan. Untuk mulai menggunakan Redshift Serverless, lihat. Memulai dengan gudang data Amazon Redshift Tanpa Server

Setelah membuat dan masuk ke konsol yang disediakan Amazon Redshift, Anda dapat membuat dan mengelola objek Amazon Redshift, termasuk cluster, node, dan database. Anda juga dapat menjalankan kueri, melihat kueri, dan melakukan operasi SQL data definition language (DDL) dan data manipulation language (DHTML) lainnya dengan klien SQL.

Masuk ke AWS Management Console dan buka konsol Amazon Redshift di. https://console.aws.amazon.com/redshiftv2/

Kami menyarankan Anda memulai dengan membuka dasbor cluster yang disediakan untuk mulai menggunakan konsol Amazon Redshift.

Bergantung pada konfigurasi Anda, item berikut akan muncul di panel navigasi konsol yang disediakan Amazon Redshift:

Dalam tutorial ini, Anda melakukan langkah-langkah berikut.

Mendaftar untuk AWS

Jika Anda belum memilikinya Akun AWS, daftarlah untuk satu. Jika Anda sudah memiliki akun, Anda dapat melewati prasyarat ini dan menggunakan akun yang ada.

Tentukan aturan firewall

Di beberapa lingkungan, Anda menentukan port saat meluncurkan klaster Amazon Redshift. Anda menggunakan port ini bersama dengan URL endpoint cluster untuk mengakses cluster. Anda juga membuat aturan masuk masuk dalam grup keamanan untuk mengizinkan akses melalui port ke klaster Anda.

Jika komputer klien Anda berada di belakang firewall, pastikan Anda mengetahui port terbuka yang dapat Anda gunakan. Menggunakan port terbuka ini, Anda dapat terhubung ke cluster dari alat klien SQL dan menjalankan kueri. Jika Anda tidak tahu port terbuka, bekerja dengan seseorang yang memahami aturan firewall jaringan Anda untuk menentukan port terbuka di firewall Anda.

Meskipun Amazon Redshift menggunakan port 5439 secara default, koneksi tidak berfungsi jika port itu tidak terbuka di firewall Anda. Anda tidak dapat mengubah nomor port untuk klaster Amazon Redshift setelah dibuat. Jadi, pastikan Anda menentukan port terbuka yang berfungsi di lingkungan Anda selama proses peluncuran.

Langkah 1: Buat contoh cluster Amazon Redshift

Dalam tutorial ini, Anda berjalan melalui proses untuk membuat cluster Amazon Redshift dengan database. Kemudian Anda memuat kumpulan data dari Amazon S3 ke tabel di database Anda. Anda dapat menggunakan contoh cluster ini untuk mengevaluasi layanan Amazon Redshift.

Sebelum Anda mulai menyiapkan cluster Amazon Redshift, pastikan Anda menyelesaikan prasyarat yang diperlukan seperti dan. Mendaftar untuk AWS Tentukan aturan firewall

Untuk setiap operasi yang mengakses data dari AWS sumber daya lain, klaster Anda memerlukan izin untuk mengakses sumber daya dan data pada sumber daya atas nama Anda. Contohnya adalah menggunakan perintah SQL COPY untuk memuat data dari Amazon Simple Storage Service (Amazon S3). Anda memberikan izin tersebut dengan menggunakan AWS Identity and Access Management (IAM). Anda dapat melakukan ini melalui peran IAM yang Anda buat dan lampirkan ke cluster Anda. Untuk informasi selengkapnya tentang kredensil dan izin akses, lihat Kredensial dan izin akses di Panduan Pengembang Database Amazon Redshift.

Langkah 2: Konfigurasikan aturan masuk untuk klien SQL

Kemudian dalam tutorial ini, Anda mengakses cluster Anda dari dalam virtual private cloud (VPC) berdasarkan layanan Amazon VPC. Namun, jika Anda menggunakan klien SQL dari luar firewall Anda untuk mengakses cluster, pastikan Anda memberikan akses masuk.

Langkah 3: Berikan akses ke klien SQL dan jalankan kueri

Untuk menanyakan database yang dihosting oleh cluster Amazon Redshift Anda, Anda memiliki beberapa opsi untuk klien SQL. Ini termasuk:

Tutorial ini menggunakan editor kueri Amazon Redshift v2 sebagai cara mudah untuk menjalankan kueri pada database yang dihosting oleh cluster Amazon Redshift Anda. Setelah membuat cluster Anda, Anda dapat langsung menjalankan kueri. Untuk detail tentang pertimbangan saat menggunakan editor kueri Amazon Redshift v2, lihat Pertimbangan saat bekerja dengan editor kueri v2 di Panduan Manajemen Amazon Redshift.

Memberikan akses ke editor kueri v2

Pertama kali administrator mengonfigurasi editor kueri v2 untuk Anda Akun AWS, mereka memilih AWS KMS key yang digunakan untuk mengenkripsi sumber daya editor kueri v2. Sumber daya editor kueri Amazon Redshift v2 mencakup kueri, buku catatan, dan bagan yang disimpan. Secara default, kunci yang AWS dimiliki digunakan untuk mengenkripsi sumber daya. Atau, administrator dapat menggunakan kunci yang dikelola pelanggan dengan memilih Amazon Resource Name (ARN) untuk kunci di halaman konfigurasi. Setelah Anda mengonfigurasi akun, pengaturan AWS KMS enkripsi tidak dapat diubah. Untuk informasi selengkapnya, lihat Mengonfigurasi Anda Akun AWS di Panduan Manajemen Pergeseran Merah Amazon.

Untuk mengakses editor kueri v2, Anda memerlukan izin. Administrator dapat melampirkan salah satu kebijakan AWS terkelola untuk editor kueri Amazon Redshift v2 ke peran IAM atau pengguna untuk memberikan izin. Kebijakan AWS terkelola ini ditulis dengan opsi berbeda yang mengontrol bagaimana sumber daya penandaan memungkinkan berbagi kueri. Anda dapat menggunakan konsol IAM (https://console.aws.amazon.com/iam/) untuk melampirkan kebijakan IAM. Untuk informasi selengkapnya tentang kebijakan ini, lihat Mengakses editor kueri v2 di Panduan Manajemen Amazon Redshift.

Anda juga dapat membuat kebijakan sendiri berdasarkan izin yang diizinkan dan ditolak dalam kebijakan terkelola yang disediakan. Jika Anda menggunakan editor kebijakan konsol IAM untuk membuat kebijakan Anda sendiri, pilih SQL Workbench sebagai layanan yang Anda buat kebijakan di editor visual. Query editor v2 menggunakan nama layanan AWS SQL Workbench di editor visual dan IAM Policy Simulator.

Untuk informasi selengkapnya, lihat Bekerja dengan editor kueri v2 di Panduan Manajemen Amazon Redshift.

Langkah 4: Muat data dari Amazon S3 ke Amazon Redshift

Setelah membuat cluster, Anda dapat memuat data dari Amazon S3 ke tabel database Anda. Ada beberapa cara untuk memuat data dari Amazon S3.

Tutorial ini menunjukkan cara menggunakan Amazon Redshift query editor v2 untuk menjalankan perintah SQL untuk CREATE tabel dan COPY data. Luncurkan Query editor v2 dari panel navigasi konsol Amazon Redshift. Dalam query editor v2 buat koneksi ke examplecluster cluster dan database bernama dev dengan pengguna admin Andaawsuser. Untuk tutorial ini pilih Kredensi sementara menggunakan nama pengguna database saat Anda membuat koneksi. Untuk detail tentang menggunakan editor kueri Amazon Redshift v2, lihat Menyambungkan ke database Amazon Redshift di Panduan Manajemen Pergeseran Merah Amazon.

Memuat data dari Amazon S3 menggunakan perintah SQL

Pada panel editor kueri editor kueri v2, konfirmasikan bahwa Anda terhubung ke examplecluster cluster dan dev database. Selanjutnya, buat tabel dalam database dan muat data ke tabel. Untuk tutorial ini, data yang Anda muat tersedia di bucket Amazon S3 yang dapat diakses dari banyak orang. Wilayah AWS

Prosedur berikut membuat tabel dan memuat data dari bucket Amazon S3 publik.

Gunakan Amazon Redshift query editor v2 untuk menyalin dan menjalankan pernyataan create table berikut untuk membuat tabel dalam public skema database. dev Untuk informasi selengkapnya tentang sintaks, lihat MEMBUAT TABEL di Panduan Pengembang Database Amazon Redshift.

Memuat data dari Amazon S3 menggunakan editor kueri v2

Bagian ini menjelaskan pemuatan data Anda sendiri ke dalam klaster Amazon Redshift. Editor kueri v2 menyederhanakan pemuatan data saat menggunakan wizard Load data. Perintah COPY yang dihasilkan dan digunakan dalam editor kueri v2 Load data wizard mendukung banyak parameter yang tersedia untuk sintaks perintah COPY untuk memuat data dari Amazon S3. Untuk informasi tentang perintah COPY dan opsinya yang digunakan untuk menyalin beban dari Amazon S3, lihat COPY dari Amazon Simple Storage Service di Panduan Pengembang Database Amazon Redshift.

Untuk memuat data Anda sendiri dari Amazon S3 ke Amazon Redshift, Amazon Redshift memerlukan peran IAM yang memiliki hak istimewa yang diperlukan untuk memuat data dari bucket Amazon S3 yang ditentukan.

Untuk memuat data Anda sendiri dari Amazon S3 ke Amazon Redshift, Anda dapat menggunakan panduan memuat data editor kueri v2. Untuk informasi tentang cara menggunakan panduan memuat data, lihat Memuat data dari Amazon S3 di Panduan Manajemen Amazon Redshift.

Buat data TICKIT di klaster Anda

TICKIT adalah database sampel yang dapat Anda muat secara opsional ke dalam klaster Amazon Redshift Anda untuk tujuan mempelajari cara menanyakan data di Amazon Redshift. Anda dapat membuat set lengkap tabel TICKIT dan memuat data ke dalam klaster Anda dengan cara berikut:

Untuk melihat detail tentang data TICKIT, lihat Contoh database di Panduan Pengembang Database Amazon Redshift.

Langkah 5: Coba contoh kueri menggunakan editor kueri

Untuk menyiapkan dan menggunakan editor kueri Amazon Redshift v2 untuk membuat kueri database, lihat Bekerja dengan editor kueri v2 di Panduan Manajemen Amazon Redshift.

Sekarang, coba beberapa contoh query, seperti yang ditunjukkan berikut. Untuk membuat kueri baru di editor kueri v2, pilih ikon+di kanan atas panel kueri, dan pilih SQL. Halaman kueri baru muncul di mana Anda dapat menyalin dan menempelkan kueri SQL berikut.

set search_path to tickit;

Untuk informasi selengkapnya tentang bekerja dengan perintah SELECT, lihat SELECT di Panduan Pengembang Database Amazon Redshift.

-- Get definition for the sales table.
SELECT *    
FROM pg_table_def    
WHERE tablename = 'sales';  

-- Find total sales on a given calendar date.
SELECT sum(qtysold) 
FROM   sales, date 
WHERE  sales.dateid = date.dateid 
AND    caldate = '2008-01-05';

-- Find top 10 buyers by quantity.
SELECT firstname, lastname, total_quantity 
FROM   (SELECT buyerid, sum(qtysold) total_quantity
        FROM  sales
        GROUP BY buyerid
        ORDER BY total_quantity desc limit 10) Q, users
WHERE Q.buyerid = userid
ORDER BY Q.total_quantity desc;   

-- Find events in the 99.9 percentile in terms of all time gross sales.
SELECT eventname, total_price 
FROM  (SELECT eventid, total_price, ntile(1000) over(order by total_price desc) as percentile 
       FROM (SELECT eventid, sum(pricepaid) total_price
             FROM   sales
             GROUP BY eventid)) Q, event E
       WHERE Q.eventid = E.eventid
       AND percentile = 1
ORDER BY total_price desc; 

Langkah 6: Setel ulang lingkungan Anda

Pada langkah sebelumnya, Anda telah berhasil membuat klaster Amazon Redshift, memuat data ke dalam tabel, dan data kueri menggunakan klien SQL seperti editor kueri Amazon Redshift v2.

Ketika Anda telah menyelesaikan tutorial ini, kami sarankan Anda mengatur ulang lingkungan Anda ke keadaan sebelumnya dengan menghapus cluster sampel Anda. Anda terus dikenakan biaya untuk layanan Amazon Redshift hingga Anda menghapus klaster.

Namun, Anda mungkin ingin menjaga cluster sampel tetap berjalan jika Anda ingin mencoba tugas di panduan Amazon Redshift lainnya atau tugas yang dijelaskan di dalamnya. Jalankan perintah untuk mendefinisikan dan menggunakan database di gudang data Anda

Pada halaman daftar cluster, status cluster diperbarui saat cluster dihapus.

Setelah Anda menyelesaikan tutorial ini, Anda dapat menemukan informasi lebih lanjut tentang Amazon Redshift dan langkah selanjutnya. Sumber daya tambahan untuk mempelajari tentang Amazon Redshift