Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Konfigurasikan akses jaringan untuk EMR klaster Amazon Anda

Sebelum Anda mulai menggunakan Amazon EMR atau EMR Tanpa Server untuk tugas persiapan data di Studio, pastikan bahwa Anda atau administrator telah mengonfigurasi jaringan Anda untuk memungkinkan komunikasi antara Studio dan Amazon. EMR Setelah komunikasi ini diaktifkan, Anda dapat memilih untuk:

Instruksi jaringan bervariasi berdasarkan apakah Studio dan Amazon EMR digunakan dalam Amazon Virtual Private Cloud (VPC) pribadi atau berkomunikasi melalui internet.

Secara default, Studio atau Studio Classic berjalan dalam akses internet VPC yang AWS dikelola. Saat menggunakan koneksi internet, Studio dan Studio Classic mengakses AWS sumber daya, seperti bucket Amazon S3, melalui internet. Namun, jika Anda memiliki persyaratan keamanan untuk mengontrol akses ke data dan wadah pekerjaan, sebaiknya Anda mengonfigurasi Studio atau Studio Classic dan Amazon EMR agar data dan container Anda tidak dapat diakses melalui internet. Untuk mengontrol akses ke sumber daya atau menjalankan Studio atau Studio Classic tanpa akses internet publik, Anda dapat menentukan jenis akses VPC only jaringan saat Anda onboard ke SageMaker domain Amazon. Dalam skenario ini, Studio dan Studio Classic menjalin koneksi dengan AWS layanan lain melalui VPCtitik akhir pribadi. Untuk informasi tentang mengonfigurasi Studio atau Studio Classic dalam VPC only mode, lihat Connect SageMaker Studio atau Studio Classic notebook dalam sumber daya eksternal VPC ke sumber daya eksternal. .

Dua bagian pertama menjelaskan cara memastikan komunikasi antara Studio atau Studio Classic dan Amazon EMR VPCs tanpa akses internet publik. Bagian terakhir mencakup cara memastikan komunikasi antara Studio atau Studio Classic dan Amazon EMR menggunakan koneksi internet. Sebelum menghubungkan Studio atau Studio Classic dan Amazon EMR tanpa akses internet, pastikan untuk membuat titik akhir untuk Amazon Simple Storage Service (penyimpanan data), Amazon CloudWatch (logging dan monitoring), dan Amazon SageMaker Runtime (kontrol akses berbasis peran halus ()). RBAC

Untuk menghubungkan Studio atau Studio Classic dan AmazonEMR:

Studio dan Amazon EMR terpisah VPCs

Untuk mengizinkan komunikasi antara Studio atau Studio Classic dan Amazon EMR saat digunakan secara terpisahVPCs:

Langkah-langkah untuk menghubungkan Studio atau Studio Classic dan Amazon EMR adalah sama apakah sumber daya digunakan dalam satu AWS akun (Kasus penggunaan akun tunggal) atau di beberapa AWS akun (Kasus penggunaan lintas akun).

Diagram berikut menunjukkan contoh VPC penyiapan Amazon yang mengaktifkan JupyterLab atau notebook Studio Classic untuk menyediakan EMR kluster Amazon dari AWS CloudFormation templat di Service Catalog dan kemudian terhubung ke EMR klaster Amazon dalam akun yang sama AWS . Diagram memberikan ilustrasi tambahan tentang titik akhir yang diperlukan untuk koneksi langsung ke berbagai AWS layanan, seperti Amazon S3 atau CloudWatch Amazon, VPCs ketika tidak memiliki akses internet. Atau, NATgateway harus digunakan untuk memungkinkan instance dalam subnet pribadi dari beberapa VPCs untuk berbagi satu alamat IP publik yang disediakan oleh gateway internet saat mengakses internet.

Studio dan Amazon EMR berada di tempat yang sama VPC

Jika Studio atau Studio Classic dan Amazon EMR berada dalam subnet yang berbeda, tambahkan rute ke setiap tabel rute subnet pribadi untuk merutekan lalu lintas antara Studio atau Studio Classic dan subnet AmazonEMR. Anda dapat menentukan rute tersebut dengan membuka bagian Tabel Rute masing-masing VPC di VPC dasbor. Jika Anda menggunakan Studio atau Studio Classic dan Amazon EMR di subnet yang sama VPC dan sama, Anda tidak perlu merutekan lalu lintas antara Studio dan Amazon. EMR

Apakah Anda perlu memperbarui tabel perutean atau tidak, grup keamanan domain Studio atau Studio Classic Anda harus mengizinkan lalu lintas keluar, dan grup keamanan node EMR utama Amazon harus mengizinkan lalu lintas masuk pada TCP port Apache Livy, Hive, atau Presto (masing-masing, 899810000, dan8889) dari grup keamanan instans Studio atau Studio Classic. Apache Livy adalah layanan yang memungkinkan interaksi dengan Amazon EMR melalui antarmuka. REST

Studio dan Amazon EMR berkomunikasi melalui internet publik

Secara default, Studio dan Studio Classic menyediakan antarmuka jaringan yang memungkinkan komunikasi dengan internet melalui gateway internet yang VPC terkait dengan SageMaker domain. Jika Anda memilih untuk terhubung ke Amazon EMR melalui internet publik, Amazon EMR perlu menerima lalu lintas masuk di TCP port Apache Livy, Hive, atau Presto (masing-masing, 899810000, dan8889) dari gateway internetnya. Apache Livy adalah layanan yang memungkinkan interaksi dengan Amazon EMR melalui antarmuka. REST

Perlu diingat bahwa setiap port tempat Anda mengizinkan lalu lintas masuk merupakan potensi kelemahan keamanan. Cermatlah dalam meninjau grup keamanan kustom untuk memastikan bahwa Anda meminimalisir kelemahan. Untuk informasi selengkapnya, lihat Mengendalikan lalu lintas jaringan dengan grup keamanan.

Atau, lihat Blog dan whitepaper panduan mendetail tentang cara mengaktifkan Kerberos di EMR Amazon, mengatur cluster di subnet pribadi, dan mengakses cluster menggunakan Network Load Balancer NLB () untuk mengekspos hanya port tertentu, yang dikendalikan akses melalui grup keamanan.