Pemrograman skrip Spark - AWS Glue

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Pemrograman skrip Spark

AWS Glue memudahkan untuk menulis atau membuat otomatis ekstrak, transformasi, dan memuat (ETL) skrip, selain menguji dan menjalankannya. Bagian ini menjelaskan ekstensi ke Apache Spark yang telah diperkenalkan AWS Glue, dan memberikan contoh cara membuat kode dan menjalankan ETL skrip dengan Python dan Scala.

penting

Versi AWS Glue yang berbeda mendukung versi Apache Spark yang berbeda. Skrip kustom Anda harus kompatibel dengan versi Apache Spark yang didukung. Untuk informasi tentang versi AWS Glue, lihatGlue version job property.