View a markdown version of this page

Menggunakan PCS-ready DLAMI dengan AWS PCS - AWS PCS

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Menggunakan PCS-ready DLAMI dengan AWS PCS

AWS PCS-ready DLAMI Base GPU AMI (Ubuntu 24.04) adalah Image Mesin AWS-maintained Amazon untuk menjalankan AI/ML dan beban kerja HPC di PCS. AWS Ini menyediakan fondasi siap produksi sehingga Anda dapat menerapkan cluster dalam hitungan menit alih-alih membangun dan memvalidasi AMI khusus.

Yang disertakan

PCS-ready DLAMI dibangun di atas Deep Learning Base GPU AMI (Ubuntu 24.04) dan menambahkan komponen PCS berikut: AWS

  • Agen PCS - Agen manajemen cluster AWS PCS

  • Slurm untuk AWS PCS - Beberapa versi Slurm yang didukung sudah diinstal sebelumnya. Versi yang benar diaktifkan secara otomatis selama peluncuran instance berdasarkan konfigurasi cluster Anda.

  • Utilitas EFS - Untuk memasang sistem file Amazon EFS

Sumber DLAMI menyediakan sistem operasi (Ubuntu 24.04), driver GPU NVIDIA, toolkit CUDA, driver EFA, klien Lustre, dan infrastruktur dasar lainnya. Untuk detail tentang komponen ini, lihat catatan rilis Deep Learning AMI.

PCS-ready DLAMI tersedia untuk arsitektur x86_64 dan arm64.

catatan

PCS-ready DLAMI tidak menyertakan perangkat lunak aplikasi seperti AI/ML kerangka kerja (PyTorch,, JAX) TensorFlow, kompiler, atau perpustakaan matematika. Anda dapat menambahkan lapisan aplikasi Anda pada sistem file bersama atau dengan membangun AMI khusus di atas PCS-ready DLAMI.

Setiap bidang Deskripsi AMI merangkum kontennya, termasuk sumber DLAMI yang menjadi dasarnya, versi Agen PCS, versi Slurm yang didukung, dan versi utilitas EFS. Anda dapat melihat bidang ini di konsol Amazon EC2 atau dengan menggunakan describe-images API. Berikut ini adalah contoh nilai bidang Deskripsi:

PCS-Ready DLAMI based on Deep Learning Base OSS Nvidia Driver GPU AMI (Ubuntu 24.04) 20260522. PCS Agent: 1.4.0-1. Slurm: 24.11.7-1, 25.05.7-1, 25.11.2-1. EFS Utils: 2.4.2

Temukan PCS-ready DLAMI saat ini

Konsol Manajemen AWS
Untuk menemukan PCS-ready DLAMI di konsol
  1. Buka konsol AWS PCS dan navigasikan untuk membuat atau mengedit grup simpul komputasi.

  2. Di bagian pemilihan AMI, pilih PCS-ready AMI.

  3. Sebuah dropdown muncul yang menunjukkan DLAMis yang tersedia yang PCS-ready difilter oleh arsitektur jenis instance yang Anda pilih.

  4. Pilih AWS PCS-ready DLAMI Base AMI (Ubuntu 24.04). Dropdown menampilkan ID AMI dan nama AMI lengkap di bawah ini untuk referensi.

AWS CLI

Anda dapat mengambil PCS-ready DLAMI AMI ID terbaru menggunakan Amazon EC2 Systems Manager Parameter Store. Ganti region-code dengan Anda Wilayah AWS.

  • x86_64

    aws ssm get-parameter --region region-code \ --name /aws/service/pcs/ami/dlami-base-ubuntu2404/x86_64/latest/ami-id \ --query "Parameter.Value" --output text
  • arm64

    aws ssm get-parameter --region region-code \ --name /aws/service/pcs/ami/dlami-base-ubuntu2404/arm64/latest/ami-id \ --query "Parameter.Value" --output text

Atau, Anda dapat mencari PCS-ready DLAMI berdasarkan pola nama:

  • x86_64

    aws ec2 describe-images --region region-code --owners amazon \ --filters 'Name=name,Values=aws-pcs-ready-dlami-base-ubuntu2404-x86_64-*' \ 'Name=state,Values=available' \ --query 'sort_by(Images, &CreationDate)[-1].[Name,ImageId]' --output text
  • arm64

    aws ec2 describe-images --region region-code --owners amazon \ --filters 'Name=name,Values=aws-pcs-ready-dlami-base-ubuntu2404-arm64-*' \ 'Name=state,Values=available' \ --query 'sort_by(Images, &CreationDate)[-1].[Name,ImageId]' --output text

Gunakan ID AMI saat Anda membuat atau memperbarui grup simpul komputasi.

Terima pemberitahuan untuk rilis baru

Anda dapat menerima pemberitahuan setiap kali PCS-ready DLAMI baru dirilis. Pemberitahuan dipublikasikan dengan Amazon SNS menggunakan topik berikut:

arn:aws:sns:us-west-2:265886551188:pcs-ready-dlami-release-notifications

Pesan diposting ke topik ini ketika PCS-ready DLAMI baru diterbitkan.

Untuk berlangganan pemberitahuan ril PCS-ready is DLAMI
  1. Buka konsol Amazon SNS.

  2. Di bilah navigasi, ubah Wilayah AWS ke AS Barat (Oregon), jika perlu. Anda harus memilih Wilayah tempat pemberitahuan SNS yang Anda berlangganan dibuat.

  3. Di panel navigasi, pilih Lang ganan, lalu pilih Buat langganan.

  4. Di kotak dialog Create subscription (Buat langganan), lakukan hal berikut:

    1. Untuk Topik ARN, masukkan berikut ini: arn:aws:sns:us-west-2:265886551188:pcs-ready-dlami-release-notifications

    2. Untuk Protokol, pilih Email.

    3. Untuk Endpoint, masukkan alamat email tempat Anda ingin menerima notifikasi.

    4. Pilih Buat langganan.

  5. Anda akan menerima email konfirmasi dengan baris subjek Pemberitahuan AWS - Konfirmasi Langganan. Buka email dan pilih Konfirmasi berlangganan untuk menyelesaikan langganan Anda.

Gunakan dengan Infrastruktur sebagai Kode

Jalur parameter SSM menyediakan referensi stabil yang selalu diselesaikan ke ID AMI terbaru. Anda dapat menggunakan ini di CloudFormation templat untuk secara otomatis mengambil versi baru pada penempatan ulang:

AmiId: '{{resolve:ssm:/aws/service/pcs/ami/dlami-base-ubuntu2404/x86_64/latest/ami-id}}'

Perbarui ke versi baru

AWS merilis versi PCS-ready DLAMI yang diperbarui saat sumber Deep Learning Base GPU AMI diperbarui atau ketika komponen PCS (Agen PCS atau Slurm untuk PCS) diperbarui. Untuk memperbarui cluster Anda, ambil ID AMI terbaru menggunakan parameter SSM atau pencarian nama yang dijelaskan di atas, lalu perbarui setiap grup simpul komputasi untuk mereferensikan ID AMI baru.