View a markdown version of this page

Mengirimkan pekerjaan ke cluster Amazon EMR - Amazon EMR

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Mengirimkan pekerjaan ke cluster Amazon EMR

Bagian ini menjelaskan metode yang dapat Anda gunakan untuk mengirimkan pekerjaan ke cluster Amazon EMR. Untuk mengirimkan pekerjaan, Anda dapat menambahkan langkah-langkah, atau Anda dapat secara interaktif mengirimkan pekerjaan Hadoop ke node utama.

Pertimbangkan aturan perilaku langkah berikut saat Anda mengirimkan langkah-langkah ke cluster:

  • ID langkah dapat berisi hingga 256 karakter.

  • Anda dapat memiliki hingga 256 langkah PENDING dan RUNNING dalam sebuah cluster.

  • Bahkan jika Anda memiliki 256 langkah aktif yang berjalan di cluster, Anda dapat secara interaktif mengirimkan pekerjaan ke node utama. Anda dapat mengirimkan jumlah langkah yang tidak terbatas selama usia klaster yang berjalan lama, tetapi hanya 256 langkah dapat BERJALAN atau TERTUNDA pada satu waktu tertentu.

  • Dengan Amazon EMR versi 4.8.0 dan yang lebih baru, kecuali versi 5.0.0, Anda dapat membatalkan langkah yang tertunda. Untuk informasi selengkapnya, lihat Batalkan langkah saat Anda mengirimkan pekerjaan ke cluster Amazon EMR.

  • Dengan Amazon EMR versi 5.28.0 dan yang lebih baru, Anda dapat membatalkan langkah-langkah tertunda dan berjalan. Anda juga dapat memilih untuk menjalankan beberapa langkah secara paralel untuk meningkatkan pemanfaatan klaster dan menghemat biaya. Untuk informasi selengkapnya, lihat Pertimbangan untuk menjalankan beberapa langkah secara paralel saat Anda mengirimkan pekerjaan ke Amazon EMR.

  • Dengan rilis Amazon EMR 7.14.0 dan yang lebih baru, jumlah langkah maksimum yang dapat Anda tambahkan atau batalkan per permintaan adalah 100. Dengan rilis sebelumnya, maksimum adalah 256 langkah per permintaan.

catatan

Untuk performa terbaik, sebaiknya Anda menyimpan tindakan bootstrap kustom, skrip, dan file lain yang ingin Anda gunakan dengan Amazon EMR di bucket Amazon S3 yang Wilayah AWS sama dengan cluster Anda.