Tutorial: Membuat definisi pekerjaan paralel multi-node pada sumber daya Amazon EC2

Untuk membuat definisi pekerjaan paralel multi-node di EC2 sumber daya Amazon:

1. Buka AWS Batch konsol di https://console.aws.amazon.com/batch/.

2. Dari bilah navigasi, pilih yang Wilayah AWS akan digunakan.

3. Di panel navigasi, pilih Definisi Job.

4. Pilih Buat.

5. Untuk jenis Orkestrasi, pilih Amazon Elastic Compute Cloud (Amazon). EC2

6. Untuk Aktifkan paralel multi-node, nyalakan paralel multi-node.

7. Untuk Name (Name), masukkan nama yang unik untuk ketentuan tugas Anda. Namanya bisa mencapai 128 karakter, dan dapat berisi huruf besar dan kecil, angka, tanda hubung (-), dan garis bawah (_).

8. (Opsional) Untuk batas waktu Eksekusi, tentukan jumlah maksimum detik yang Anda inginkan untuk menjalankan upaya pekerjaan. Jika upaya melebihi durasi batas waktu, upaya dihentikan dan dipindahkan ke FAILED status. Untuk informasi selengkapnya, lihat Batas waktu Job.

9. (Opsional) Aktifkan Prioritas penjadwalan. Masukkan nilai prioritas penjadwalan antara 0 dan 100. Nilai yang lebih tinggi diberikan prioritas yang lebih tinggi daripada nilai yang lebih rendah.

10. (Opsional) Untuk upaya Job, masukkan berapa kali AWS Batch upaya untuk memindahkan pekerjaan ke RUNNABLE status. Masukkan angka antara 1 dan 10.

11. (Opsional) Untuk kondisi strategi Coba lagi, pilih Tambahkan evaluasi saat keluar. Masukkan setidaknya satu nilai parameter dan kemudian pilih Action. Untuk setiap rangkaian kondisi, Tindakan harus diatur ke Coba Ulang atau Keluar. Tindakan ini berarti sebagai berikut:

    • Coba lagi — AWS Batch coba lagi sampai jumlah upaya pekerjaan yang Anda tentukan tercapai.

    • Keluar — AWS Batch berhenti mencoba kembali pekerjaan.

    penting

    Jika Anda memilih Tambahkan evaluasi saat keluar, Anda harus mengonfigurasi setidaknya satu parameter dan memilih Tindakan atau memilih Hapus evaluasi saat keluar.

12. (Opsional) Perluas Tag dan kemudian pilih Tambahkan tag untuk menambahkan tag ke sumber daya. Masukkan kunci dan nilai opsional, lalu pilih Tambah tag. Anda juga dapat mengaktifkan Menyebarkan tag untuk menyebarkan tag dari definisi pekerjaan dan pekerjaan ke tugas AmazonECS.

13. Pilih Halaman berikutnya.

14. Untuk Number of nodes (Jumlah simpul), masukkan jumlah total simpul yang akan digunakan untuk tugas Anda.

15. Untuk Main node (Simpul utama), masukkan indeks simpul yang akan digunakan untuk simpul utama. Indeks simpul utama default adalah 0.

16. Untuk tipe Instance, pilih jenis instance.

    catatan

    Jenis instance yang Anda pilih berlaku untuk semua node.

17. Untuk Parameter, pilih Tambahkan parameter untuk menambahkan placeholder substitusi parameter sebagai pasangan Kunci dan Nilai opsional.

18. Di bagian rentang Node:

    1. Pilih Add node range (Tambahkan rentang simpul). Ini akan membuat bagian Node range (Rentang simpul).

    2. Untuk Target nodes (Simpul target), tentukan rentang untuk grup simpul Anda, menggunakan notasi range_start:range_end.

       Anda dapat membuat hingga lima rentang node untuk node yang Anda tentukan untuk pekerjaan Anda. Rentang simpul menggunakan nilai indeks untuk simpul, dan indeks simpul dimulai dari 0. Pastikan bahwa nilai indeks akhir rentang grup node akhir Anda adalah satu kurang dari jumlah node yang Anda tentukan. Misalnya, anggaplah Anda menentukan 10 node, dan Anda ingin menggunakan grup node tunggal. Kemudian, rentang akhir Anda adalah 9.

    3. Untuk Gambar, pilih Docker gambar untuk digunakan untuk pekerjaan Anda. Secara default, gambar di Docker Hub registri tersedia. Anda juga dapat menentukan repositori lainnya dengan repository-url/image:tag. Namanya bisa mencapai 225 karakter. Ini dapat berisi huruf besar dan kecil, angka, tanda hubung (-), garis bawah (_), titik dua (:), garis miring maju (/), dan tanda angka (#). Parameter ini dipetakan ke Image bagian Create a container dari Docker Remote API dan IMAGE parameter. docker run

       catatan

       Docker arsitektur gambar harus sesuai dengan arsitektur prosesor dari sumber daya komputasi yang dijadwalkan. Misalnya, Arm berdasarkan Docker gambar hanya dapat berjalan di Arm sumber daya komputasi berbasis.

       • Gambar di repositori ECR Publik Amazon menggunakan konvensi lengkap registry/repository[:tag] atau registry/repository[@digest] penamaan (misalnya,). public.ecr.aws/registry_alias/my-web-app:latest

       • Gambar di ECR repositori Amazon menggunakan konvensi registry/repository[:tag] penamaan lengkap. Sebagai contoh, aws_account_id.dkr.ecr.region.amazonaws.com/my-web-app:latest.

       • Gambar di repositori resmi Docker Hub menggunakan satu nama (misalnya, ubuntu ataumongo).

       • Gambar di repositori lain di Docker Hub memenuhi syarat dengan nama organisasi (misalnya,amazon/amazon-ecs-agent).

       • Gambar di repositori online lainnya memenuhi syarat lebih lanjut berdasarkan nama domain (misalnya, quay.io/assemblyline/ubuntu).

    4. Untuk sintaks Command, pilih Bash atau. JSON

    5. Untuk Command (Perintah), tentukan perintah untuk diteruskan ke kontainer. Untuk perintah sederhana, Anda dapat memasukkan perintah seperti yang Anda lakukan pada prompt perintah di tab Space delimited. Kemudian, verifikasi bahwa JSON hasilnya benar. JSONHasilnya diteruskan ke Docker daemon. Untuk perintah yang lebih rumit (misalnya, dengan karakter khusus), Anda dapat beralih ke JSONtab dan memasukkan string array yang setara di sana.

       Parameter ini dipetakan ke Cmd bagian Create a container dari Docker Remote API dan COMMAND parameternya ke docker run. Untuk informasi lebih lanjut tentang Docker CMDparameter, lihat https://docs.docker.com/engine/referensi/pembangun/ #cmd.

       catatan

       Anda dapat menggunakan nilai dan placeholder default untuk substitusi parameter dalam perintah Anda. Untuk informasi selengkapnya, lihat Parameter.

    6. Untuk vCPUs, tentukan jumlah cadangan vCPUs untuk wadah. Parameter ini dipetakan ke CpuShares bagian Create a container dari Docker Remote API dan --cpu-shares opsi untuk docker run. Setiap v CPU setara dengan 1.024 sahamCPU. Anda harus menentukan setidaknya satu vCPU.

    7. Untuk Memory (Memori), tentukan batas keras (dalam MiB) memori yang akan diberikan ke kontainer tugas. Jika kontainer Anda mencoba untuk melebihi memori yang ditentukan di sini, kontainer akan dihentikan. Parameter ini dipetakan ke Memory bagian Create a container dari Docker Remote API dan --memory opsi untuk docker run. Anda harus menentukan sedikitnya 4 MiB memori untuk sebuah tugas.

       catatan

       Untuk memaksimalkan pemanfaatan sumber daya Anda, Anda dapat memberikan pekerjaan Anda sebanyak mungkin memori untuk jenis instance tertentu. Untuk informasi selengkapnya, lihat Menghitung manajemen memori sumber daya.

    8. (Opsional) Untuk Jumlah GPUs, tentukan jumlah pekerjaan yang GPUs Anda gunakan. Pekerjaan berjalan pada wadah dengan jumlah tertentu GPUs yang disematkan ke wadah itu.

    9. (Opsional) Untuk peran Job, Anda dapat menentukan IAM peran yang menyediakan kontainer dalam pekerjaan Anda dengan izin untuk menggunakan. AWS APIs Fitur ini menggunakan ECS IAM peran Amazon untuk fungsionalitas tugas. Untuk informasi selengkapnya termasuk prasyarat konfigurasi, lihat IAMPeran untuk Tugas di Panduan Pengembang Layanan Kontainer Elastis Amazon.

       catatan

       Untuk pekerjaan yang berjalan pada sumber daya Fargate, diperlukan peran pekerjaan.

       catatan

       Hanya peran yang memiliki hubungan kepercayaan Amazon Elastic Container Service Task Role (Peran Tugas Amazon Elastic Container Service) yang ditampilkan di sini. Untuk informasi selengkapnya tentang membuat IAM peran untuk AWS Batch pekerjaan Anda, lihat Membuat IAM Peran dan Kebijakan untuk Tugas Anda di Panduan Pengembang Layanan Amazon Elastic Container.

    10. (Opsional) Untuk peran Eksekusi, tentukan IAM peran yang memberikan izin kepada agen ECS penampung Amazon untuk melakukan AWS API panggilan atas nama Anda. Fitur ini menggunakan ECS IAM peran Amazon untuk fungsionalitas tugas. Untuk informasi selengkapnya, lihat IAMperan eksekusi ECS tugas Amazon di Panduan Pengembang Layanan Kontainer Elastis Amazon.

19. (Opsional) Perluas konfigurasi tambahan:

    1. Untuk variabel Lingkungan, pilih Tambahkan variabel lingkungan untuk menambahkan variabel lingkungan sebagai pasangan nama-nilai. Variabel-variabel ini diteruskan ke wadah.

    2. Untuk konfigurasi peran Job, Anda dapat menentukan IAM peran yang menyediakan kontainer dalam pekerjaan Anda dengan izin untuk menggunakan. AWS APIs Fitur ini menggunakan ECS IAM peran Amazon untuk fungsionalitas tugas. Untuk informasi selengkapnya termasuk prasyarat konfigurasi, lihat IAMPeran untuk Tugas di Panduan Pengembang Layanan Kontainer Elastis Amazon.

       catatan

       Untuk pekerjaan yang berjalan pada sumber daya Fargate, diperlukan peran pekerjaan.

       catatan

       Hanya peran yang memiliki hubungan kepercayaan Amazon Elastic Container Service Task Role (Peran Tugas Amazon Elastic Container Service) yang ditampilkan di sini. Untuk informasi selengkapnya tentang cara membuat IAM peran untuk AWS Batch pekerjaan Anda, lihat Membuat IAM Peran dan Kebijakan untuk Tugas Anda di Panduan Pengembang Layanan Amazon Elastic Container.

    3. Untuk peran Eksekusi, tentukan IAM peran yang memberikan izin kepada agen ECS penampung Amazon untuk melakukan AWS API panggilan atas nama Anda. Fitur ini menggunakan ECS IAM peran Amazon untuk fungsionalitas tugas. Untuk informasi selengkapnya, lihat IAMperan eksekusi ECS tugas Amazon di Panduan Pengembang Layanan Kontainer Elastis Amazon.

20. Di bagian Konfigurasi Keamanan:

    1. (Opsional) Untuk memberikan hak istimewa yang lebih tinggi pada container pekerjaan Anda pada instance host (mirip dengan root pengguna), aktifkan Privileged. Parameter ini dipetakan ke Privileged bagian Create a container dari Docker Remote API dan --privileged opsi untuk docker run.

    2. (Opsional) Untuk Pengguna, masukkan nama pengguna untuk digunakan di dalam wadah. Parameter ini dipetakan ke User bagian Create a container dari Docker Remote API dan --user opsi untuk docker run.

    3. (Opsional) Untuk Rahasia, pilih Tambahkan rahasia untuk menambahkan rahasia sebagai pasangan nama-nilai. Rahasia-rahasia ini terungkap dalam wadah. Untuk informasi lebih lanjut, lihat LogConfiguration: secretOptions.

21. Di bagian konfigurasi Linux:

    1. Aktifkan Aktifkan sistem file baca saja untuk menghapus akses tulis ke volume.

    2. (Opsional) Aktifkan Aktifkan init proses untuk menjalankan init proses di dalam wadah. Proses ini meneruskan sinyal dan menuai proses.

    3. Untuk ukuran memori bersama, masukkan ukuran (dalam MiB) volume. /dev/shm

    4. Untuk ukuran swap Max, masukkan jumlah total memori swap (dalam MiB) yang dapat digunakan wadah.

    5. Untuk Swappiness masukkan nilai antara 0 dan 100 untuk menunjukkan perilaku swappiness wadah. Jika Anda tidak menentukan nilai dan pertukaran diaktifkan, nilai default ke 60. Untuk informasi lebih lanjut, lihat:swappinessLinuxParameters.

    6. (Opsional) Untuk Perangkat, pilih Tambah perangkat untuk menambahkan perangkat:

       1. Untuk Container path (Jalur kontainer), tentukan jalur dalam instans kontainer untuk mengungkap perangkat yang dipetakan ke instans host. Jika Anda mengosongkan ini, jalur host digunakan dalam wadah.

       2. Untuk Host path (Jalur host), tentukan jalur perangkat dalam instans host.

       3. Untuk Izin, pilih satu atau beberapa izin untuk diterapkan ke perangkat. Izin yang tersedia adalah READ, WRITE, dan MKNOD.

22. (Opsional) Untuk titik Mount, pilih konfigurasi Tambahkan titik pemasangan untuk menambahkan titik pemasangan untuk volume data. Anda harus menentukan volume sumber dan jalur kontainer. Titik-titik pemasangan ini diteruskan ke Docker daemon pada instance kontainer. Anda juga dapat memilih untuk membuat volume Baca saja.

23. (Opsional) Untuk konfigurasi Ulimits, pilih Tambahkan ulimit untuk menambahkan ulimits nilai untuk wadah. Masukkan nilai Name, Soft limit, dan Hard limit, lalu pilih Add ulimit.

24. (Opsional) Untuk konfigurasi Volume, pilih Tambahkan volume untuk membuat daftar volume yang akan diteruskan ke wadah. Masukkan Nama dan jalur Sumber untuk volume dan kemudian pilih Tambahkan volume. Anda juga dapat memilih untuk mengaktifkan Aktifkan EFS.

25. (Opsional) Untuk Tmpfs, pilih Tambahkan tmpfs untuk menambahkan mount. tmpfs

26. (Opsional) Di bagian konfigurasi Logging:

    1. Untuk driver Log, pilih driver log yang akan digunakan. Untuk informasi selengkapnya tentang driver log yang tersedia, lihat LogConfiguration: logDriver.

       catatan

       Secara default, driver log awslogs akan digunakan.

    2. Untuk Opsi, pilih Tambahkan opsi untuk menambahkan opsi. Masukkan pasangan nama-nilai, lalu pilih Tambah opsi.

    3. Untuk Rahasia, pilih Tambahkan rahasia. Masukkan pasangan nama-nilai dan kemudian pilih Tambahkan rahasia untuk menambahkan rahasia.

       Tip

       Untuk informasi lebih lanjut, lihat LogConfiguration: secretOptions.

27. Pilih Halaman berikutnya.

28. Untuk tinjauan definisi Job, tinjau langkah-langkah konfigurasi. Jika Anda perlu melakukan perubahan, pilih Edit. Setelah selesai, pilih Buat definisi pekerjaan.