Titik akhir pengembangan

Endpoint pengembangan adalah lingkungan yang dapat Anda gunakan untuk mengembangkan dan menguji AWS Glue skrip. Anda dapat menggunakan AWS Glue untuk membuat, mengedit, dan menghapus titik akhir pengembangan. Anda dapat membuat daftar semua titik akhir pengembangan yang dibuat. Anda dapat menambahkan, menghapus, atau memutar kunci SSH dari sebuah titik akhir pengembangan. Anda juga dapat membuat notebook yang menggunakan titik akhir pengembangan tersebut.

Anda memberikan nilai konfigurasi untuk penyediaan lingkungan pengembangan. Nilai-nilai ini memberi tahu AWS Glue cara mengatur jaringan sehingga Anda dapat mengakses titik akhir pengembangan dengan aman, dan agar titik akhir Anda dapat mengakses penyimpanan data Anda. Kemudian, Anda dapat membuat sebuah notebook yang terhubung ke titik akhir pengembangan. Anda menggunakan notebook Anda untuk menulis dan menguji skrip ETL Anda.

Menggunakan peran AWS Identity and Access Management (IAM) dengan izin yang mirip dengan peran IAM yang Anda gunakan untuk menjalankan AWS Glue Pekerjaan ETL. Gunakan virtual private cloud (VPC), subnet, dan grup keamanan untuk membuat titik akhir pengembangan yang dapat connect ke sumber daya data Anda dengan aman. Anda menghasilkan pasangan kunci SSH untuk connect ke lingkungan pengembangan dengan menggunakan SSH.

Anda dapat membuat titik akhir pengembangan untuk data Amazon S3 dan dalam sebuah VPC yang dapat Anda gunakan untuk mengakses set data menggunakan JDBC.

Anda dapat menginstal klien notebook Jupyter di mesin lokal Anda dan menggunakannya untuk men-debug dan menguji skrip ETL pada titik akhir pengembangan. Atau, Anda dapat menggunakan buku catatan Sagemaker untuk membuat skrip ETL di aktif. JupyterLab AWS Lihat Menggunakan buku SageMaker catatan dengan titik akhir pengembangan Anda.

AWS Glue tag EC2 instans Amazon dengan nama yang diawali dengan. aws-glue-dev-endpoint

Anda dapat mengatur server notebook pada titik akhir pengembangan untuk dijalankan PySpark AWS Glue ekstensi.