View a markdown version of this page

Pra-pemrosesan - AWS Deep Learning AMIs

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Pra-pemrosesan

Prapemrosesan data melalui transformasi atau augmentasi seringkali dapat menjadi CPU-bound proses, dan ini bisa menjadi hambatan dalam keseluruhan pipeline Anda. Kerangka kerja memiliki operator bawaan untuk pemrosesan gambar, tetapi DALI (Data Augmentation Library) menunjukkan peningkatan kinerja dibandingkan opsi bawaan kerangka kerja.

  • NVIDIA Data Augmentation Library (DALI): DALI melepaskan augmentasi data ke GPU. Ini tidak diinstal sebelumnya di DLAMI, tetapi Anda dapat mengaksesnya dengan menginstalnya atau memuat wadah kerangka kerja yang didukung di DLAMI atau instans Amazon Elastic Compute Cloud lainnya. Lihat halaman proyek DALI di situs web NVIDIA untuk detailnya. Untuk contoh kasus penggunaan dan untuk mengunduh sampel kode, lihat contoh SageMaker Preprocessing Training Performance.

  • NVJpeg: pustaka dekoder GPU-accelerated JPEG untuk pemrogram C. Ini mendukung decoding gambar atau batch tunggal serta operasi transformasi berikutnya yang umum dalam pembelajaran mendalam. nvJpeg dilengkapi dengan DALI, atau Anda dapat mengunduh dari halaman nvjpeg situs web NVIDIA dan menggunakannya secara terpisah.

Anda mungkin tertarik dengan topik lain ini tentang pemantauan dan pengoptimalan GPU: