Pra-pemrosesan - AWS Deep Learning AMIs

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Pra-pemrosesan

Preprocessing data melalui transformasi atau augmentasi seringkali bisa menjadi proses yang CPU terikat, dan ini bisa menjadi hambatan dalam keseluruhan pipeline Anda. Kerangka kerja memiliki operator bawaan untuk pemrosesan gambar, tetapi DALI (Data Augmentation Library) menunjukkan peningkatan kinerja dibandingkan opsi bawaan kerangka kerja.

  • NVIDIAData Augmentation Library (DALI): DALI membongkar augmentasi data ke file. GPU Ini tidak diinstal sebelumnya diDLAMI, tetapi Anda dapat mengaksesnya dengan menginstalnya atau memuat wadah kerangka kerja yang didukung pada instans Amazon Elastic Compute Cloud Anda DLAMI atau lainnya. Lihat halaman DALI proyek di NVIDIA situs web untuk detailnya. Untuk contoh kasus penggunaan dan untuk mengunduh sampel kode, lihat contoh Kinerja Pelatihan SageMaker Preprocessing.

  • nvJPEG: perpustakaan JPEG decoder GPU -percepatan untuk programmer C. Ini mendukung decoding gambar tunggal atau batch serta operasi transformasi berikutnya yang umum dalam pembelajaran mendalam. nv JPEG dilengkapi denganDALI, atau Anda dapat mengunduh dari halaman nvjpeg NVIDIAsitus web dan menggunakannya secara terpisah.

Anda mungkin tertarik dengan topik lain tentang GPU pemantauan dan pengoptimalan: