Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.
Menggunakan perlindungan terminasi untuk melindungi cluster Anda dari penutupan yang tidak disengaja
Perlindungan terminasi melindungi klaster Anda dari penghentian yang tidak disengaja, yang dapat sangat berguna untuk klaster yang berjalan lama yang memproses beban kerja penting. Saat perlindungan pengakhiran diaktifkan pada klaster yang berjalan lama, Anda masih dapat mengakhiri klaster, tetapi Anda harus secara gamblang menghapus perlindungan pengakhiran dari klaster terlebih dahulu. Ini membantu memastikan bahwa EC2 instance tidak dimatikan karena kecelakaan atau kesalahan. Anda dapat mengaktifkan perlindungan pengakhiran saat membuat klaster, dan Anda dapat mengubah pengaturan pada klaster yang sedang berjalan.
Dengan perlindungan penghentian diaktifkan, TerminateJobFlows
tindakan di Amazon EMR API tidak berfungsi. Pengguna tidak dapat mengakhiri cluster menggunakan ini API atau terminate-clusters
perintah dari AWS CLI. APIMengembalikan kesalahan, dan CLI keluar dengan kode pengembalian bukan nol. Saat Anda menggunakan EMR konsol Amazon untuk menghentikan klaster, Anda akan diminta langkah ekstra untuk menonaktifkan perlindungan penghentian.
Awas
Perlindungan penghentian tidak menjamin bahwa data disimpan jika terjadi kesalahan manusia atau solusinya — misalnya, jika perintah reboot dikeluarkan dari baris perintah saat terhubung ke instans menggunakanSSH, jika aplikasi atau skrip yang berjalan pada instance mengeluarkan perintah reboot, atau jika Amazon atau EC2 Amazon EMR API digunakan untuk menonaktifkan perlindungan penghentian. Ini juga benar jika Anda menjalankan Amazon EMR rilis 7.1 dan yang lebih tinggi dan instance menjadi tidak sehat dan tidak dapat dipulihkan. Bahkan dengan perlindungan terminasi diaktifkan, data yang disimpan ke penyimpanan instans, termasuk HDFS data, dapat hilang. Tulis keluaran data ke lokasi Amazon S3 dan buat strategi pencadangan yang sesuai untuk kebutuhan kelangsungan bisnis Anda.
Pengakhiran penghentian tidak memengaruhi kemampuan Anda untuk menskalakan sumber daya klaster menggunakan salah satu tindakan berikut:
-
Mengubah ukuran cluster secara manual dengan AWS Management Console atau AWS CLI Untuk informasi selengkapnya, lihat Mengubah ukuran cluster yang sedang berjalan secara manual.
-
Menghapus instance dari grup instans inti atau tugas menggunakan kebijakan penskalaan kedalam dengan penskalaan otomatis. Untuk informasi selengkapnya, lihat Menggunakan penskalaan otomatis dengan kebijakan kustom untuk grup instans.
-
Menghapus instans dari armada instans dengan mengurangi kapasitas target. Untuk informasi selengkapnya, lihat Opsi armada instans.
Perlindungan penghentian dan Amazon EC2
Setelan perlindungan penghentian di EMR klaster Amazon sesuai dengan DisableApiTermination
atribut untuk semua EC2 instans Amazon di klaster. Misalnya, jika Anda mengaktifkan perlindungan penghentian di EMR klaster, Amazon EMR secara otomatis menyetel DisableApiTermination
ke true untuk semua EC2 instance dalam EMR klaster. Hal yang sama berlaku jika Anda menonaktifkan perlindungan penghentian. Amazon EMR secara otomatis menyetel DisableApiTermination
ke false untuk semua EC2 instance dalam EMR cluster. Jika Anda menghentikan atau mengurangi skala klaster dari Amazon EMR dan konflik EC2 setelan Amazon untuk suatu EC2 instans, Amazon EMR memprioritaskan setelan Amazon di atas EMR pengaturan DisableApiStop
dan DisableApiTermination
di Amazon EC2 dan terus menghentikan instans. EC2
Misalnya, Anda dapat menggunakan EC2 konsol Amazon untuk mengaktifkan perlindungan penghentian pada EC2 instans Amazon dalam EMR klaster dengan perlindungan penghentian dinonaktifkan. Jika Anda menghentikan atau mengurangi klaster dengan EMR konsol Amazon, AWS CLI, atau Amazon EMRAPI, Amazon EMR mengganti DisableApiTermination
pengaturan, menyetelnya ke false, dan mengakhiri instance bersama dengan instance lainnya.
Anda juga dapat menggunakan EC2 konsol Amazon untuk mengaktifkan perlindungan berhenti pada EC2 instans Amazon dalam EMR klaster dengan perlindungan penghentian dinonaktifkan. Jika Anda menghentikan atau mengurangi skala cluster, Amazon akan EMR menyetel DisableApiStop
ke false di Amazon EC2 dan menghentikan instance bersama dengan instance lainnya.
Amazon EMR mengganti DisableApiStop
setelan hanya jika Anda menghentikan atau menurunkan skala cluster. Saat Anda mengaktifkan atau menonaktifkan perlindungan penghentian di EMR kluster, Amazon EMR tidak mengubah disableApiStop
setelan untuk EC2 instans apa pun di EMR kluster masing-masing.
penting
Jika Anda membuat instance sebagai bagian dari EMR klaster Amazon dengan perlindungan penghentian, dan Anda menggunakan Amazon EC2 API atau AWS CLI perintah untuk memodifikasi instance sehingga DisableApiTermination
false
, dan kemudian Amazon EC2 API atau AWS CLI perintah menjalankan TerminateInstances
operasi, EC2 instans Amazon berakhir.
Perlindungan terminasi dan YARN node yang tidak sehat
Amazon EMR secara berkala memeriksa YARN status Apache Hadoop dari node yang berjalan pada EC2 instance inti dan tugas Amazon dalam sebuah cluster. Status kesehatan dilaporkan oleh layanan pemeriksa NodeManager kesehatanUNHEALTHY
, pengontrol EMR instans Amazon menambahkan node ke denylist dan tidak mengalokasikan YARN kontainer ke dalamnya sampai menjadi sehat kembali. Bergantung pada status perlindungan terminasi, penggantian node yang tidak sehat, dan versi EMR rilis Amazon, Amazon EMR akan mengganti instance yang tidak sehat atau berhenti mengalokasikan pengontrol ke instance.
Perlindungan penghentian dan penghentian setelah eksekusi langkah
Saat Anda mengaktifkan penghentian setelah eksekusi langkah dan juga mengaktifkan perlindungan penghentian, Amazon EMR mengabaikan perlindungan penghentian.
Saat Anda mengirimkan langkah ke suatu klaster, Anda dapat mengatur properti ActionOnFailure
untuk menentukan apa yang terjadi jika langkah tersebut tidak dapat menyelesaikan pelaksanaan karena mengalami kesalahan. Nilai yang mungkin untuk pengaturan ini adalah TERMINATE_CLUSTER
(TERMINATE_JOB_FLOW
dengan versi yang lebih lama), CANCEL_AND_WAIT
, dan CONTINUE
. Untuk informasi selengkapnya, lihat Kirim pekerjaan ke sebuah klaster.
Jika langkah gagal yang dikonfigurasi dengan ActionOnFailure
set keCANCEL_AND_WAIT
, jika penghentian setelah eksekusi langkah diaktifkan, cluster akan berakhir tanpa mengeksekusi langkah selanjutnya.
Jika langkah yang mengalami kegagalan yang dikonfigurasi dengan set ActionOnFailure
ke TERMINATE_CLUSTER
, gunakan tabel pengaturan di bawah ini untuk menentukan hasilnya.
ActionOnFailure | Pengakhiran setelah eksekusi langkah | Perlindungan pengakhiran | Hasil |
---|---|---|---|
|
Diaktifkan |
Nonaktif |
Klaster berakhir |
Diaktifkan |
Diaktifkan |
Klaster berakhir |
|
Nonaktif |
Diaktifkan |
Klaster berlanjut |
|
Nonaktif |
Nonaktif |
Klaster berakhir |
Perlindungan pengakhiran dan Instans Spot
Perlindungan EMR penghentian Amazon tidak mencegah Instans EC2 Spot Amazon berhenti ketika harga Spot naik di atas harga Spot maksimum.
Mengonfigurasi perlindungan pengakhiran saat Anda meluncurkan klaster
Anda dapat mengaktifkan atau menonaktifkan perlindungan terminasi saat meluncurkan klaster menggunakan konsol, AWS CLI, atauAPI.
Untuk cluster simpul tunggal, pengaturan perlindungan terminasi default adalah sebagai berikut:
-
Meluncurkan cluster oleh Amazon EMR Console —Perlindungan Terminasi dinonaktifkan secara default.
-
Meluncurkan klaster oleh AWS CLI
aws emr create-cluster
—Perlindungan Terminasi dinonaktifkan kecuali--termination-protected
ditentukan. -
Meluncurkan klaster dengan EMR API RunJobFlowperintah Amazon—Perlindungan Penghentian dinonaktifkan kecuali nilai
TerminationProtected
boolean disetel ke.true
Untuk cluster ketersediaan tinggi, pengaturan perlindungan terminasi default adalah sebagai berikut:
-
Meluncurkan klaster oleh Amazon EMR Console — Perlindungan Terminasi diaktifkan secara default.
-
Meluncurkan klaster oleh AWS CLI
aws emr create-cluster
—Perlindungan Terminasi dinonaktifkan kecuali--termination-protected
ditentukan. -
Meluncurkan klaster dengan EMR API RunJobFlowperintah Amazon—Perlindungan Penghentian dinonaktifkan kecuali nilai
TerminationProtected
boolean disetel ke.true
Mengonfigurasi perlindungan pengakhiran untuk menjalankan klaster
Anda dapat mengonfigurasi perlindungan terminasi untuk klaster yang sedang berjalan dengan konsol atau AWS CLI.