Penyimpanan bersama - AWS ParallelCluster

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Penyimpanan bersama

AWS ParallelCluster mendukung baik menggunakan Amazon EBS, FSxuntuk ONTAP, dan FSxuntuk Buka volume penyimpanan ZFS bersama, Amazon EFS dan FSxuntuk sistem file penyimpanan bersama Lustre, atau File Cache. Kami menyarankan Anda mengikuti panduan pilar keandalan AWS kerangka kerja yang dirancang dengan baik dan mencadangkan volume dan sistem file Anda.

Pilih sistem penyimpanan yang memenuhi persyaratan I/O HPC aplikasi Anda. Anda dapat mengoptimalkan setiap sistem file berdasarkan kasus penggunaan spesifik Anda. Untuk informasi selengkapnya, lihat ikhtisar opsi penyimpanan.

EBSVolume Amazon dilampirkan ke node kepala dan dibagikan dengan node komputasi melaluiNFS. Opsi ini dapat hemat biaya, tetapi kinerja tergantung pada sumber daya node kepala karena skala kebutuhan penyimpanan. Ini bisa menjadi hambatan karena lebih banyak node komputasi ditambahkan ke cluster dan permintaan throughput meningkat.

Sistem EFS file Amazon diskalakan karena kebutuhan penyimpanan berubah. Anda dapat mengonfigurasi sistem file ini untuk berbagai kasus penggunaan. Gunakan sistem EFS file Amazon untuk menjalankan aplikasi paralel dan sensitif latensi di cluster Anda.

FSxuntuk sistem file Lustre dapat memproses kumpulan data besar-besaran hingga ratusan gigabyte per detik throughput, jutaan, dan latensi IOPS sub-milidetik. Gunakan FSx untuk sistem file Lustre untuk menuntut lingkungan komputasi kinerja tinggi.

Di dalamBagian SharedStorage, Anda dapat menentukan penyimpanan eksternal atau AWS ParallelCluster terkelola:

  • Penyimpanan eksternal mengacu pada volume atau sistem file yang ada yang Anda kelola. AWS ParallelCluster tidak membuat atau menghapus penyimpanan ini.

  • Penyimpanan terkelola mengacu pada volume atau sistem file yang AWS ParallelCluster dibuat dan dapat dihapus.

Penyimpanan eksternal

Anda dapat mengonfigurasi AWS ParallelCluster untuk melampirkan penyimpanan eksternal ke cluster saat cluster dibuat atau diperbarui. Demikian pula Anda dapat mengonfigurasinya untuk melepaskan penyimpanan eksternal dari cluster saat cluster dihapus atau diperbarui. Data Anda disimpan dan Anda dapat menggunakannya untuk penyimpanan bersama permanen jangka panjang di luar siklus hidup klaster.

catatan

Versi AWS ParallelCluster sebelum 3.8 tidak memungkinkan sistem file yang dikelola secara eksternal untuk dipasang di. /home Mulai dari versi 3.8, AWS ParallelCluster memungkinkan Anda untuk menggunakan /home sebagai titik pemasangan untuk sistem file terkelola eksternal. Anda dapat memasang sistem file yang dikelola secara eksternal /home dengan menentukan /home sebagai nilai ke MountDirparameter di bawah. Bagian SharedStorage

Amazon File Cache tidak cocok untuk digunakan sebagai /home direktori sistem dan oleh karena itu tidak didukung saat ini untuk pemasangan/home.

Saat menentukan /home direktori di bawah opsi SharedStorageTypekonfigurasi akan diganti, artinya pengaturan di bawah Bagian SharedStorage akan digunakan sebagai gantinya. Bagian SharedStorage

Saat memasang sistem file eksternal ke /home direktori AWS ParallelCluster menyalin /home konten node kepala ke sistem file eksternal, tanpa menimpa file yang ada di penyimpanan eksternal. Ini termasuk mentransfer SSH kunci cluster untuk pengguna default, jika tidak ada pada sistem file eksternal. Untuk informasi lebih lanjut lihatAWS ParallelCluster pertimbangan penyimpanan bersama.

AWS ParallelCluster penyimpanan terkelola

AWS ParallelCluster penyimpanan terkelola bergantung pada siklus hidup cluster secara default dalam konfigurasi. Parameter SharedStorage DeletionPolicy konfigurasi diatur ke secara Delete default.

Secara default, sistem file AWS ParallelCluster terkelola atau volume dan datanya dihapus jika salah satu dari berikut ini benar.

  • Anda menghapus cluster.

  • Anda mengubah konfigurasi penyimpanan bersama yang dikelolaName.

  • Anda menghapus penyimpanan bersama yang dikelola dari konfigurasi.

Setel DeletionPolicy Retain untuk mempertahankan sistem file bersama terkelola atau volume dan data Anda. Kami menyarankan Anda mencadangkan data Anda secara teratur untuk menghindari hilangnya data. Anda dapat menggunakannya AWS Backupuntuk mengelola cadangan secara terpusat untuk semua opsi penyimpanan Anda.

Anda dapat menghapus ketergantungan siklus hidup dengan pengaturan konfigurasi. Untuk informasi selengkapnya, lihat Ubah penyimpanan AWS ParallelCluster terkelola ke penyimpanan eksternal.

Untuk informasi tentang kuota penyimpanan bersama, lihatKuota untuk penyimpanan bersama.

Untuk informasi selengkapnya tentang penyimpanan bersama dan beralih ke AWS ParallelCluster versi baru, lihatPraktik terbaik: memindahkan cluster ke versi AWS ParallelCluster minor atau patch baru.

Anda dapat mengonfigurasi AWS ParallelCluster untuk melampirkan penyimpanan eksternal ke cluster saat cluster dibuat atau diperbarui. Demikian pula, Anda dapat mengonfigurasinya untuk melepaskan penyimpanan eksternal dari cluster saat cluster dihapus atau diperbarui. Data Anda disimpan dan Anda dapat menggunakannya untuk solusi penyimpanan bersama permanen jangka panjang yang independen dari siklus hidup klaster.

Secara default, penyimpanan terkelola bergantung pada siklus hidup klaster. Anda dapat menghapus ketergantungan dengan pengaturan konfigurasi yang dijelaskan diUbah penyimpanan AWS ParallelCluster terkelola ke penyimpanan eksternal.

Dengan pengaturan tertentu, Anda dapat mengoptimalkan setiap solusi penyimpanan yang didukung untuk kasus penggunaan Anda.

Untuk kuota penyimpanan bersama, lihatKuota untuk penyimpanan bersama.

Untuk informasi selengkapnya tentang penyimpanan bersama dan beralih ke AWS ParallelCluster versi baru, lihatPraktik terbaik: memindahkan cluster ke versi AWS ParallelCluster minor atau patch baru.

Topik berikut menjelaskan cara mengonfigurasi penyimpanan bersama untuk setiap layanan penyimpanan yang AWS ParallelCluster mendukung.

Topik