

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

# Contoh perpustakaan paralelisme model Amazon SageMaker AI v2
<a name="distributed-model-parallel-v2-examples"></a>

Halaman ini menyediakan daftar blog dan notebook Jupyter yang menyajikan contoh praktis penerapan perpustakaan SageMaker model paralelisme (SMP) v2 untuk menjalankan pekerjaan pelatihan terdistribusi pada AI. SageMaker 

## Blog dan Studi Kasus
<a name="distributed-model-parallel-v2-examples-blog"></a>

Blog berikut membahas studi kasus tentang penggunaan SMP v2.
+ [Amazon SageMaker AI model parallel library sekarang mempercepat beban kerja PyTorch FSDP hingga 20%](https://aws.amazon.com/blogs/machine-learning/amazon-sagemaker-model-parallel-library-now-accelerates-pytorch-fsdp-workloads-by-up-to-20/)

## PyTorch contoh notebook
<a name="distributed-model-parallel-examples-v2-pytorch"></a>

Contoh notebook disediakan di [ GitHub repositori contoh SageMaker AI](https://github.com/aws/amazon-sagemaker-examples/tree/master/training/distributed_training/). Untuk mengunduh contoh, jalankan perintah berikut untuk mengkloning repositori dan pergi ke. `training/distributed_training/pytorch/model_parallel_v2`

**catatan**  
Kloning dan jalankan contoh notebook di SageMaker AI ML berikut. IDEs  
[SageMaker JupyterLab](https://docs.aws.amazon.com/sagemaker/latest/dg/studio-updated-jl.html)(tersedia di [Studio](https://docs.aws.amazon.com/sagemaker/latest/dg/studio-updated.html) yang dibuat setelah Desember 2023)
[SageMaker Editor Kode](https://docs.aws.amazon.com/sagemaker/latest/dg/code-editor.html) (tersedia di [Studio](https://docs.aws.amazon.com/sagemaker/latest/dg/studio-updated.html) yang dibuat setelah Desember 2023)
[Studio Classic](https://docs.aws.amazon.com/sagemaker/latest/dg/studio.html) (tersedia sebagai aplikasi di [Studio](https://docs.aws.amazon.com/sagemaker/latest/dg/studio-updated.html) yang dibuat setelah Desember 2023)
[SageMaker Instans Notebook](https://docs.aws.amazon.com/sagemaker/latest/dg/nbi.html)

```
git clone https://github.com/aws/amazon-sagemaker-examples.git
cd amazon-sagemaker-examples/training/distributed_training/pytorch/model_parallel_v2
```

**Notebook contoh SMP v2**
+ [Mempercepat pelatihan Llama v2 dengan SMP v2, PyTorch FSDP, dan Transformer Engine dengan menjalankan FP8 pelatihan pada instans P5](https://github.com/aws/amazon-sagemaker-examples/blob/main/training/distributed_training/pytorch/model_parallel_v2/llama_v2/smp-train-llama-fsdp-tp-fp8.ipynb)
+ [Sempurnakan Llama v2 dengan SMP v2 dan PyTorch FSDP dalam skala besar menggunakan paralelisme tensor, sharding hibrida, dan pembongkaran aktivasi](https://github.com/aws/amazon-sagemaker-examples/blob/main/training/distributed_training/pytorch/model_parallel_v2/llama_v2/smp-finetuning-llama-fsdp-tp.ipynb)
+ [Latih GPT-Neox dengan SMP v2 dan FSDP dalam skala besar PyTorch ](https://github.com/aws/amazon-sagemaker-examples/blob/main/training/distributed_training/pytorch/model_parallel_v2/gpt-neox/smp-train-gpt-neox-fsdp-tp.ipynb)
+ [Sempurnakan GPT-Neox dengan SMP v2 dan PyTorch FSDP dalam skala besar menggunakan paralelisme tensor, sharding hibrida, dan pembongkaran aktivasi](https://github.com/aws/amazon-sagemaker-examples/blob/main/training/distributed_training/pytorch/model_parallel_v2/gpt-neox/smp-finetuning-gpt-neox-fsdp-tp.ipynb)