Mem-filter kunci dalam set data - AWS Glue

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Mem-filter kunci dalam set data

Gunakan transformasi Filter untuk membuat set data baru dengan mem-filter catatan dari set data masukan berdasarkan ekspresi reguler. Baris yang tidak memenuhi syarat filter dihapus dari output.

  • Untuk tipe data string, Anda dapat mem-filter baris di mana nilai kunci cocok dengan string yang ditentukan.

  • Untuk tipe data numerik, Anda dapat mem-filter baris dengan membandingkan nilai kunci untuk nilai yang ditentukan menggunakan operator perbandingan <, >, =, !=, <=, dan >=.

Jika Anda menentukan beberapa syarat filter, hasilnya digabungkan menggunakan operator AND secara default, tetapi Anda dapat memilih OR sebagai gantinya.

Transformasi Filter peka huruf besar-kecil. Tambahkan ApplyMappingtransformasi sebagai node induk jika Anda memerlukan nama kunci properti case-insensitive.

Untuk menambahkan simpul transformasi Filter ke diagram tugas Anda

  1. (Opsional) Buka panel Resource dan kemudian pilih Filter untuk menambahkan transformasi baru ke diagram pekerjaan Anda, jika diperlukan.

  2. Pada tab Properti simpul, masukkan nama untuk simpul dalam diagram tugas. Jika sebuah induk simpul belum dipilih, maka pilihlah sebuah simpul dari daftar Induk simpul untuk digunakan sebagai sumber masukan untuk transformasi tersebut.

  3. Pilih tab Transformasi.

  4. Pilih salah satu Global AND atau Global OR. Ini menentukan bagaimana beberapa syarat filter digabungkan. Semua syarat digabungkan menggunakan operasi AND atau OR. Jika Anda hanya memiliki satu syarat filter, maka Anda dapat memilih salah satu.

  5. Pilih tombol Tambahkan syarat di bagian Syarat filter untuk menambahkan syarat filter.

    Di bidang Kunci, pilih nama sebuah kunci properti dari set data. Di bidang Operasi, pilih operator perbandingan. Di bidang Nilai, masukkan nilai perbandingan. Berikut ini adalah beberapa contoh syarat filter:

    • year >= 2018

    • State matches 'CA*'

    Ketika Anda mem-filter nilai-nilai string, pastikan bahwa nilai perbandingan menggunakan format ekspresi reguler yang cocok dengan bahasa skrip yang dipilih di properti tugas (Python atau Scala).

  6. Tambahkan syarat filter tambahan, sesuai kebutuhan.

  7. (Opsional) Setelah mengkonfigurasi properti simpul transformasi, Anda dapat melihat skema yang telah diubah untuk data Anda dengan memilih tab Skema output di panel detail simpul. Pertama kali Anda memilih tab ini untuk setiap simpul dalam tugas Anda, Anda akan diminta untuk memberikan IAM role untuk mengakses data. Jika Anda belum menentukan IAM role pada tab Detail tugas, maka Anda akan diminta untuk memasukkan IAM role di sini.

  8. (Opsional) Setelah mengkonfigurasi properti simpul dan properti transformasi, Anda dapat melihat pratinjau set data yang diubah dengan memilih tab Pratinjau data di panel detail simpul. Pertama kali Anda memilih tab ini untuk setiap simpul dalam tugas Anda, Anda akan diminta untuk memberikan IAM role untuk mengakses data. Ada biaya yang terkait dengan penggunaan fitur ini, dan penagihan akan dimulai langsung setelah Anda memberikan IAM role.