Menggunakan penyimpanan yang kompatibel dengan Amazon S3 pada perangkat Snow Family dengan sekelompok perangkat Snow - AWS Snowball Edge Panduan Pengembang

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Menggunakan penyimpanan yang kompatibel dengan Amazon S3 pada perangkat Snow Family dengan sekelompok perangkat Snow

Cluster adalah kumpulan tiga atau lebih perangkat Snowball Edge yang digunakan sebagai unit logis tunggal untuk penyimpanan lokal dan tujuan komputasi. Sebuah cluster menawarkan dua manfaat utama dibandingkan perangkat Snowball Edge mandiri untuk penyimpanan dan komputasi lokal:

  • Peningkatan daya tahan — Data S3 yang disimpan dalam sekelompok perangkat Snowball Edge menikmati peningkatan daya tahan data melalui satu perangkat. Selain itu, data pada cluster tetap aman dan layak, meskipun ada kemungkinan pemadaman perangkat keras mempengaruhi cluster. Cluster dapat menahan hilangnya satu perangkat dalam kelompok 3 dan 4 perangkat dan hingga dua perangkat dalam kelompok 5 hingga 16 perangkat sebelum data dalam bahaya. Anda dapat mengganti node yang tidak sehat untuk menjaga daya tahan dan keamanan data yang tersimpan di cluster.

  • Peningkatan penyimpanan - Dengan perangkat yang dioptimalkan untuk penyimpanan Snowball Edge, Anda dapat membuat satu, 16 node cluster dengan kapasitas penyimpanan yang kompatibel dengan S3 hingga 2,6 PB yang dapat digunakan. Dengan perangkat yang dioptimalkan untuk komputasi Snowball Edge, Anda dapat membuat satu cluster 16 node hingga 501 TB kapasitas penyimpanan yang kompatibel dengan S3 yang dapat digunakan.

Klaster perangkat Snowball Edge terbuat dari simpul tanpa pemimpin. Setiap node dapat menulis data ke dan membaca data dari seluruh cluster, dan semua node mampu melakukan behind-the-scenes pengelolaan cluster.

Ingat pertimbangan berikut ketika berencana untuk menggunakan klaster perangkat Snowball Edge:

  • Kami menyarankan Anda menyediakan sumber daya redundan untuk semua perangkat di cluster untuk mengurangi potensi masalah kinerja dan stabilitas untuk cluster.

  • Dengan penyimpanan lokal mandiri dan tugas komputasi, data yang disimpan dalam klaster tidak dapat diimpor ke Amazon S3 tanpa memesan perangkat tambahan sebagai bagian dari tugas impor terpisah. Jika Anda memesan perangkat tambahan sebagai pekerjaan impor, Anda dapat mentransfer data dari klaster ke perangkat pekerjaan impor.

  • Untuk mendapatkan data ke cluster dari Amazon S3, gunakan Amazon S3 untuk membuat bucket Amazon API S3 di cluster untuk menyimpan dan mengambil objek dari S3. Selain itu, Anda dapat menggunakan AWS DataSync untuk mentransfer objek antara layanan AWS penyimpanan dan penyimpanan yang kompatibel dengan Amazon S3 di perangkat Snow Family pada perangkat Snowball Edge. Untuk informasi selengkapnya, lihat Mengonfigurasi transfer dengan penyimpanan yang kompatibel dengan S3 di Snowball Edge.

  • Anda dapat membuat pekerjaan untuk memesan sekelompok perangkat dari Konsol Manajemen AWS Snow Family, yang AWS CLI, atau salah satu AWS SDKs. Untuk informasi selengkapnya, lihat Memulai perangkat Snow Family.

  • Setiap perangkat di cluster memiliki ID node. ID node adalah pengidentifikasi unik untuk setiap perangkat di cluster, seperti ID pekerjaan untuk perangkat mandiri. Anda bisa mendapatkan node IDs dari klien Konsol Manajemen AWS Snow Family, the AWS CLI, the AWS SDKs, dan Snowball Edge. Klien Snowball Edge memerintahkan describe-device dan describe-cluster mengembalikan node IDs dengan informasi lain tentang perangkat atau cluster.

  • Umur klaster dibatasi oleh sertifikat keamanan yang diberikan kepada perangkat klaster ketika klaster disediakan. Secara default, perangkat Snowball Edge dapat digunakan hingga 360 hari sebelum harus dikembalikan. Pada akhir masa itu, perangkat berhenti merespons untuk permintaan baca/tulis. Jika Anda perlu menyimpan satu atau lebih perangkat selama lebih dari 360 hari, hubungi AWS Support.

  • Saat AWS menerima perangkat yang dikembalikan yang merupakan bagian dari cluster, kami melakukan penghapusan lengkap perangkat. Penghapusan ini mengikuti standar Institut Nasional Standar dan Teknologi (NIST) 800-88.

Penyimpanan yang kompatibel dengan Amazon S3 pada perangkat Keluarga Salju, toleransi kesalahan cluster dan kapasitas penyimpanan
Ukuran cluster Toleransi kesalahan Kapasitas penyimpanan perangkat Snowball Edge Compute Optimized (AMDEPYCdengan Gen1HDD,, dan GPU opsional) perangkat (dalam TB) Kapasitas penyimpanan Snowball Edge Compute Optimized (Compute Optimized AMD EPYC with Gen2 NVMe dan) perangkat (dalam TB) Kapasitas penyimpanan penyimpanan Snowball Edge dioptimalkan 210 perangkat TB (dalam TB)

3

Kehilangan hingga 1 node

83

38

438

4

Kehilangan hingga 1 node

125

57

657

5

Kehilangan hingga 2 node

125

57

657

6

Kehilangan hingga 2 node

167

76

904

7

Kehilangan hingga 2 node

209

95

1096

8

Kehilangan hingga 2 node

250

114

1315

9

Kehilangan hingga 2 node

292

133

1534

10

Kehilangan hingga 2 node

334

152

1754

11

Kehilangan hingga 2 node

370

165

1970

12

Kehilangan hingga 2 node

376

171

1973

13

Kehilangan hingga 2 node

418

190

2192

14

Kehilangan hingga 2 node

459

209

2411

15

Kehilangan hingga 2 node

495

225

2625

16

Kehilangan hingga 2 node

501

228

2631

Setelah Anda membuka kluster, Anda siap untuk menyimpan dan mengakses data pada cluster itu. Anda dapat menggunakan titik akhir yang kompatibel dengan Amazon S3 untuk membaca dan menulis data ke cluster.

Untuk membaca dari atau menulis data ke cluster, Anda harus memiliki kuorum baca/tulis dengan tidak lebih dari jumlah node yang tidak tersedia yang diizinkan di cluster perangkat Anda.

Kuorum cluster Snowball Edge

Kuorum mewakili jumlah minimum perangkat Snowball Edge dalam sebuah cluster yang harus berkomunikasi satu sama lain untuk mempertahankan kuorum baca/tulis.

Ketika semua perangkat dalam cluster sehat, Anda memiliki kuorum baca/tulis untuk cluster Anda. Jika satu atau dua perangkat tersebut offline, Anda mengurangi kapasitas operasional cluster. Namun, Anda masih bisa membaca dan menulis ke klaster. Dengan semua kecuali satu atau dua perangkat cluster beroperasi, cluster masih memiliki kuorum baca/tulis. Jumlah node yang dapat offline sebelum kapasitas operasional cluster terpengaruh ditemukan dithis table.

Kuorom dapat hilang jika cluster kehilangan lebih dari jumlah perangkat yang ditunjukkan dalam. this table Ketika kuorom hilang, cluster offline dan data di cluster tidak tersedia. Anda mungkin dapat memperbaikinya, atau data mungkin hilang secara permanen, tergantung pada tingkat keparahan kejadian. Jika ini adalah peristiwa daya eksternal sementara, dan Anda dapat menghidupkan kembali perangkat Snowball Edge dan membuka semua node di cluster, data Anda tersedia lagi.

penting

Jika kuorum minimum simpul sehat tidak ada, hubungi AWS Support.

Anda dapat menggunakan describe-cluster perintah untuk melihat status kunci dan jangkauan jaringan dari setiap node. Memastikan bahwa perangkat di cluster Anda sehat dan terhubung adalah tanggung jawab administratif yang Anda ambil saat Anda menggunakan penyimpanan cluster. Untuk informasi selengkapnya, lihat Mendapatkan status perangkat.

Jika Anda menentukan satu atau lebih node tidak sehat, Anda dapat mengganti node di cluster untuk menjaga kuorom dan kesehatan serta stabilitas data Anda. Untuk informasi selengkapnya, lihat Mengganti node dalam sebuah cluster.