View a markdown version of this page

Melampirkan komputasi ke Ruang Kerja EMR Studio - Amazon EMR

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Melampirkan komputasi ke Ruang Kerja EMR Studio

Amazon EMR Studio menjalankan perintah notebook menggunakan kernel pada klaster EMR. Sebelum Anda dapat memilih kernel, Anda harus melampirkan Workspace ke cluster yang menggunakan instans Amazon EC2, ke Amazon EMR di cluster EKS, atau ke aplikasi EMR Serverless. EMR Studio memungkinkan Anda melampirkan Workspace ke klaster baru atau yang sudah ada, dan memberi Anda fleksibilitas untuk mengubah klster tanpa menutup Workspace.

Bagian ini membahas topik-topik berikut untuk membantu Anda menggunakan dan menyediakan klaster untuk EMR Studio:

Melampirkan cluster Amazon EC2 ke Ruang Kerja EMR Studio

Anda dapat melampirkan cluster EMR yang berjalan di Amazon EC2 ke Workspace saat Anda membuat Workspace, atau melampirkan cluster ke Ruang Kerja yang ada. Jika Anda ingin membuat dan melampirkan klaster baru, lihat Membuat dan melampirkan cluster EMR baru ke Ruang Kerja EMR Studio.

catatan

Ruang kerja di Studio yang mengaktifkan propagasi identitas terpercaya IAM Identity Center hanya dapat dilampirkan ke cluster EMR dengan konfigurasi keamanan yang mengaktifkan Pusat Identitas.

On create
Melampirkan ke cluster komputasi Amazon EMR saat Anda membuat Ruang Kerja
  1. Di kotak dialog Create a Workspace, pastikan Anda telah memilih subnet untuk Workspace baru. Perluas bagian Konfigurasi lanjutan.

  2. Pilih Lampirkan Workspace ke klaster EMR.

  3. Dalam daftar dropdown cluster EMR, pilih cluster EMR yang ada untuk dilampirkan ke Workspace.

Setelah Anda melampirkan cluster, selesaikan pembuatan Workspace. Saat Anda membuka Workspace baru untuk pertama kalinya dan memilih panel cluster EMR, Anda akan melihat cluster yang Anda pilih terlampir.

On launch
Melampirkan ke cluster komputasi Amazon EMR saat Anda meluncurkan Workspace
  1. Arahkan ke daftar Workspaces dan pilih baris untuk Workspace yang ingin Anda luncurkan. Kemudian, pilih Luncurkan Ruang Kerja > Luncurkan dengan opsi.

  2. Pilih cluster EMR untuk dilampirkan ke Ruang Kerja Anda.

Setelah Anda melampirkan cluster, selesaikan pembuatan Workspace. Saat Anda membuka Workspace baru untuk pertama kalinya dan memilih panel cluster EMR, Anda akan melihat cluster yang Anda pilih terlampir.

In JupyterLab
Melampirkan Ruang Kerja ke cluster komputasi Amazon EMR di JupyterLab
  1. Pilih Ruang Kerja Anda, lalu pilih Luncur kan Ruang Kerja > Peluncuran cepat.

  2. Di dalam JupyterLab, buka tab Cluster di sidebar kiri.

  3. Pilih menu tar ik-turun EMR pada cluster EC2, atau pilih Amazon EMR di cluster EKS.

  4. Pilih Lampirkan untuk melampirkan cluster ke Ruang Kerja Anda.

Setelah Anda melampirkan cluster, selesaikan pembuatan Workspace. Saat Anda membuka Workspace baru untuk pertama kalinya dan memilih panel cluster EMR, Anda akan melihat cluster yang Anda pilih terlampir.

In the Workspace UI
Melampirkan Workspace ke cluster komputasi Amazon EMR dari antarmuka pengguna Workspace
  1. Di Ruang Kerja yang ingin Anda lampirkan ke cluster, pilih ikon cluster EMR dari sidebar kiri untuk membuka panel Cluster.

  2. Di bawah Jenis cluster, perluas dropdown dan pilih cluster EMR di EC2.

  3. Pilih klaster dari daftar dropdown. Anda mungkin perlu melepaskan klaster yang ada terlebih dahulu untuk mengaktifkan daftar dropdown pilihan klaster.

  4. Pilih Lampirkan. Ketika klaster terlampir, Anda akan melihat pesan berhasil muncul.

Melampirkan Amazon EMR di kluster EKS ke Ruang Kerja EMR Studio

Selain menggunakan klaster Amazon EMR yang berjalan di Amazon EC2, Anda dapat melampirkan Workspace untuk EMR Amazon pada klaster EKS untuk menjalankan kode notebook. Untuk informasi selengkapnya tentang Amazon EMR di EKS, lihat Apa itu Amazon EMR di EKS.

Sebelum Anda dapat menghubungkan Workspace ke Amazon EMR di kluster EKS, administrator Studio Anda harus memberi Anda izin akses.

catatan

Anda tidak dapat meluncurkan Amazon EMR di cluster EKS di EMR Studio yang menggunakan propagasi identitas terpercaya IAM Identity Center.

On create
Untuk melampirkan Amazon EMR di cluster EKS saat Anda membuat Workspace
  1. Di kotak dialog Create a Workspace, perluas bagian Konfigurasi lanjutan.

  2. Pilih Lampirkan Ruang Kerja ke Amazon EMR di kluster EKS.

  3. Di bawah Amazon EMR di kluster EKS, pilih cluster dari daftar dropdown.

  4. Di bawah Pilih titik akhir, pilih titik akhir terkelola untuk dilampirkan ke Ruang Kerja. Titik akhir terkelola adalah gateway yang memungkinkan EMR Studio berkomunikasi dengan klaster pilihan Anda.

  5. Pilih Buat Ruang Kerja untuk menyelesaikan proses pembuatan Workspace dan melampirkan cluster yang dipilih.

Setelah melampirkan klaster, Anda dapat menyelesaikan proses pembuatan Workspace. Saat Anda membuka Workspace baru untuk pertama kalinya dan memilih panel cluster EMR, Anda akan melihat bahwa cluster yang Anda pilih terpasang.

In the Workspace UI
Untuk melampirkan Amazon EMR pada cluster EKS dari antarmuka pengguna Workspace
  1. Di Ruang Kerja yang ingin Anda lampirkan ke cluster, pilih ikon cluster EMR dari sidebar kiri untuk membuka panel Cluster.

  2. Perluas dropdown tipe Cluster dan pilih cluster EMR di EKS.

  3. Di bawah cluster EMR di EKS, pilih cluster dari daftar dropdown.

  4. Di bawah Titik Akhir, pilih titik akhir terkelola untuk dilampirkan ke Ruang Kerja. Titik akhir terkelola adalah gateway yang memungkinkan EMR Studio berkomunikasi dengan klaster pilihan Anda.

  5. Pilih Lampirkan. Ketika klaster terlampir, Anda akan melihat pesan berhasil muncul.

Melampirkan aplikasi Amazon EMR Serverless ke Ruang Kerja EMR Studio

Anda dapat melampirkan Workspace ke aplikasi EMR Serverless untuk menjalankan beban kerja interaktif. Untuk informasi selengkapnya, lihat Menggunakan buku catatan untuk menjalankan beban kerja interaktif dengan EMR Serverless melalui EMR Studio.

catatan

Anda tidak dapat melampirkan aplikasi EMR Serverless ke EMR Studio yang menggunakan propagasi identitas terpercaya IAM Identity Center.

contoh Lampirkan Ruang Kerja ke aplikasi EMR Serverless di JupyterLab

Sebelum Anda dapat menghubungkan Ruang Kerja ke aplikasi Tanpa Server EMR, administrator akun Anda harus memberi Anda izin akses seperti yang dijelaskan dalam Izin yang diperlukan untuk beban kerja interaktif.

  1. Arahkan ke EMR Studio pilih Ruang Kerja Anda, lalu pilih Luncurkan Ruang Kerja > Pel uncuran cepat.

  2. Di dalam JupyterLab, buka tab Cluster di sidebar kiri.

  3. Pilih EMR Serverless sebagai opsi komputasi, lalu pilih aplikasi EMR Serverless dan peran runtime.

  4. Untuk melampirkan cluster ke Ruang Kerja Anda, pilih Lamp irkan.

Sekarang ketika Anda membuka Ruang Kerja ini, Anda akan melihat aplikasi yang Anda pilih terlampir.

Membuat dan melampirkan cluster EMR baru ke Ruang Kerja EMR Studio

Pengguna EMR Studio lanjutan dapat menyediakan klaster EMR baru yang berjalan di Amazon EC2 untuk digunakan dengan Workspace. Cluster baru memiliki semua aplikasi data besar yang diperlukan untuk EMR Studio diinstal secara default.

Untuk membuat klaster, administrator Studio Anda harus terlebih dahulu memberikan izin menggunakan kebijakan sesi. Untuk informasi selengkapnya, lihat Buat kebijakan izin untuk pengguna EMR Studio.

Anda dapat membuat klaster baru di kotak dialog Buat Workspace atau dari panel Klaster di UI Workspace. Cara mana pun, Anda memiliki dua opsi pembuatan klaster:

  1. Buat klaster EMR – Buat klaster EMR dengan memilih jenis dan jumlah instans Amazon EC2.

  2. Gunakan template cluster — Menyediakan cluster dengan memilih template cluster yang telah ditentukan sebelumnya. Opsi ini muncul jika Anda memiliki izin untuk menggunakan templat cluster.

    catatan

    Jika Anda mengaktifkan propagasi identitas tepercaya dengan Pusat Identitas IAM untuk Studio Anda, maka Anda harus menggunakan template untuk membuat cluster.

Untuk membuat klaster EMR dengan menyediakan konfigurasi klaster
  1. Pilih titik awal.

    Untuk… Lakukan ini...
    Membuat klaster saat Anda membuat Workspace dengan kotak dialog Buat Workspace. Perluas bagian Konfigurasi lanjutan di kotak dialog Buat Workspace, dan pilih Buat klaster EMR.
    Buat cluster dari panel cluster EMR di UI Workspace setelah Anda membuat Workspace. Pilih tab cluster EMR di sidebar kiri Workspace yang terbuka, perluas bagian Konfigurasi lanjutan, dan pilih Buat cluster.
  2. Masukkan nama Nama kluster. Penamaan cluster membantu Anda menemukannya nanti di daftar Cluster Studio EMR.

  3. Untuk rilis Amazon EMR, Pilih versi rilis Amazon EMR untuk cluster.

  4. Misalnya, pilih jenis dan jumlah instans Amazon EC2 untuk cluster. Untuk informasi lebih lanjut tentang memilih jenis instans, lihat Konfigurasikan jenis instans Amazon EC2 untuk digunakan dengan Amazon EMR. Satu contoh akan digunakan sebagai node utama.

  5. Pilih Subnet tempat EMR Studio dapat meluncurkan cluster baru. Setiap opsi subnet telah disetujui sebelumnya oleh administrator Studio Anda, dan Ruang Kerja Anda harus dapat terhubung ke cluster di subnet mana pun yang terdaftar.

  6. Pilih S3 URI untuk penyimpanan log.

  7. Pilih Buat klaster EMR untuk menyediakan cluster. Jika Anda menggunakan kotak dialog Buat Ruang Kerja, pilih Buat Ruang Kerja untuk membuat Ruang Kerja dan menyediakan cluster. Setelah EMR Studio menyediakan cluster baru, ia melampirkan cluster ke Workspace.

Untuk membuat klaster menggunakan templat klaster
  1. Pilih titik awal.

    Untuk… Lakukan ini...
    Membuat klaster saat Anda membuat Workspace dengan kotak dialog Buat Workspace. Perluas bagian Konfigurasi lanjutan di kotak dialog Buat ruang kerja, dan pilih Gunakan templat klaster.
    Buat cluster dari panel cluster EMR di UI Workspace. Pilih tab cluster EMR di sidebar kiri Workspace yang terbuka, perluas bagian Konfigurasi lanj utan, lalu pilih Template Cluster.
  2. Pilih templat klaster dari daftar dropdown. Setiap templat klaster yang tersedia mencakup deskripsi singkat untuk membantu Anda membuat pilihan.

  3. Templat klaster yang Anda pilih mungkin memiliki parameter tambahan seperti versi rilis atau nama klaster Amazon EMR. Anda dapat memilih atau memasukkan nilai, atau menggunakan nilai default yang dipilih oleh administrator Anda.

  4. Pilih Subnet tempat EMR Studio dapat meluncurkan cluster baru. Setiap opsi subnet telah disetujui sebelumnya oleh administrator Studio Anda, dan Ruang Kerja Anda harus dapat terhubung ke cluster di subnet apa pun.

  5. Pilih Gunakan template cluster untuk menyediakan cluster dan melampirkannya ke Workspace. Ini akan memakan waktu beberapa menit bagi EMR Studio untuk membuat cluster. Jika Anda menggunakan kotak dialog Buat Ruang Kerja, pilih Buat Ruang Kerja untuk membuat Ruang Kerja dan menyediakan cluster. Setelah EMR Studio menyediakan cluster baru, ia melampirkan cluster ke Workspace Anda.

Lepaskan komputasi dari Ruang Kerja EMR Studio

Untuk menukar cluster yang dilampirkan ke Workspace, Anda dapat melepaskan cluster dari UI Workspace.

Untuk melepaskan cluster dari Workspace
  1. Di Ruang Kerja yang ingin Anda lepaskan dari cluster, pilih ikon cluster EMR dari sidebar kiri untuk membuka panel Cluster.

  2. Di bawah Pilih klaster, pilih Lepaskan dan tunggu EMR Studio melepaskan klaster tersebut. Ketika klaster terlepas, Anda akan melihat pesan sukses.

Untuk melepaskan aplikasi EMR Serverless dari Ruang Kerja EMR Studio

Untuk menukar komputasi yang dilampirkan ke Workspace, Anda dapat melepaskan aplikasi dari UI Workspace.

  1. Di Ruang Kerja yang ingin Anda lepaskan dari cluster, pilih ikon komput asi Amazon EMR dari bilah sisi kiri untuk membuka panel Compute.

  2. Di bawah Pilih komput asi, pilih L epaskan dan tunggu EMR Studio melepaskan aplikasi. Ketika aplikasi terlepas, Anda akan melihat pesan sukses.