EMR Studio Workspace에 컴퓨팅 연결 - Amazon EMR

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

EMR Studio Workspace에 컴퓨팅 연결

Amazon EMR Studio는 EMR 클러스터에서 커널을 사용하여 노트북 명령을 실행합니다. 커널을 선택하려면 먼저 Amazon EC2 인스턴스를 사용하는 클러스터, EMR EKS 클러스터의 Amazon 또는 EMR Serverless 애플리케이션에 Workspace를 연결해야 합니다. EMR Studio를 사용하면 새 클러스터 또는 기존 클러스터에 Workspace를 연결할 수 있으며 Workspace를 닫지 않고도 클러스터를 변경할 수 있는 유연성을 제공합니다.

이 섹션에서는 EMR Studio용 클러스터를 작업하고 프로비저닝하는 데 도움이 되는 다음 주제를 다룹니다.

EMR Studio Workspace에 Amazon EC2 클러스터 연결

Workspace를 생성할 때 Amazon에서 실행되는 EMR 클러스터EC2를 Workspace에 연결하거나 기존 Workspace에 클러스터를 연결할 수 있습니다. 클러스터를 생성 및 연결하려면 EMR Studio Workspace에 새 EMR 클러스터 생성 및 연결 섹션을 참조하세요.

참고

IAM Identity Center 신뢰할 수 있는 자격 증명 전파가 활성화된 Studio의 워크스페이스는 Identity Center가 활성화된 보안 구성이 있는 EMR 클러스터에만 연결할 수 있습니다.

On create
Workspace를 생성할 때 Amazon EMR 컴퓨팅 클러스터에 연결
  1. Workspace 생성 대화 상자에서 새 Workspace의 서브넷을 이미 선택했는지 확인합니다. 고급 구성 섹션을 확장합니다.

  2. EMR 클러스터에 Workspace 연결을 선택합니다.

  3. EMR 클러스터 드롭다운 목록에서 Workspace에 연결할 기존 EMR 클러스터를 선택합니다.

클러스터를 연결한 후 Workspace 생성을 완료합니다. 새 Workspace를 처음 열고 EMR 클러스터 패널을 선택하면 선택한 클러스터가 연결되어 있어야 합니다.

On launch
Workspace를 시작할 때 Amazon EMR 컴퓨팅 클러스터에 연결
  1. Workspace 목록으로 이동하여 시작하려는 Workspace의 행을 선택합니다. 그런 다음 Workspace 시작 > 옵션으로 시작을 선택합니다.

  2. Workspace에 연결할 EMR 클러스터를 선택합니다.

클러스터를 연결한 후 Workspace 생성을 완료합니다. 새 Workspace를 처음 열고 EMR 클러스터 패널을 선택하면 선택한 클러스터가 연결되어 있어야 합니다.

In JupyterLab
의 Amazon EMR 컴퓨팅 클러스터에 Workspace 연결 JupyterLab
  1. Workspace를 선택하고 Workspace 시작 > 빠른 시작을 선택합니다.

  2. 내부에서 왼쪽 사이드바의 클러스터 탭을 JupyterLab엽니다.

  3. EMR EC2 클러스터에서을 선택하거나 EKS 클러스터EMR에서 Amazon을 선택합니다.

  4. 연결을 선택하여 클러스터를 Workspace에 연결합니다.

클러스터를 연결한 후 Workspace 생성을 완료합니다. 새 Workspace를 처음 열고 EMR 클러스터 패널을 선택하면 선택한 클러스터가 연결되어 있어야 합니다.

In the Workspace UI
Workspace 사용자 인터페이스에서 Amazon EMR 컴퓨팅 클러스터에 Workspace 연결
  1. 클러스터에 연결하려는 Workspace의 왼쪽 사이드바에서 EMR 클러스터 아이콘을 선택하여 클러스터 패널을 엽니다.

  2. 클러스터 유형에서 드롭다운을 확장하고 에서 EMR 클러스터EC2를 선택합니다.

  3. 드롭다운 목록에서 클러스터를 선택합니다. 클러스터 선택 드롭다운 목록을 활성화하려면 먼저 기존 클러스터를 분리해야 할 수 있습니다.

  4. 연결을 선택합니다. 클러스터가 연결되면 성공 메시지가 표시됩니다.

EKS 클러스터EMR의 Amazon을 EMR Studio Workspace에 연결

Amazon에서 실행되는 Amazon EMR 클러스터를 사용하는 것 외에도 EKS 클러스터의 Amazon EMR에 Workspace를 연결하여 노트북 코드를 실행할 EC2수 있습니다. Amazon EMR on에 대한 자세한 내용은의 Amazon이란 무엇입니까EMR?를 EKS EKS참조하세요.

EKS 클러스터의 AmazonEMR에 Workspace를 연결하려면 Studio 관리자가 액세스 권한을 부여해야 합니다.

참고

IAM Identity Center에서 신뢰할 수 있는 자격 증명 전파를 사용하는 EMR Studio의 EKS 클러스터EMR에서 Amazon을 시작할 수 없습니다.

On create
Workspace를 생성할 때 EKS 클러스터EMR에 Amazon을 연결하려면
  1. Workspace 생성 대화 상자에서 고급 구성 섹션을 확장합니다.

  2. EKS 클러스터에서 AmazonEMR에 Workspace 연결을 선택합니다.

  3. EKS 클러스터EMR의 Amazon에서 드롭다운 목록에서 클러스터를 선택합니다.

  4. 엔드포인트 선택에서 Workspace에 연결할 관리형 엔드포인트를 선택합니다. 관리형 엔드포인트는 EMR Studio가 선택한 클러스터와 통신할 수 있게 해주는 게이트웨이입니다.

  5. Workspace 생성을 선택하여 Workspace 생성 프로세스를 완료하고 선택한 클러스터를 연결합니다.

클러스터를 연결한 후 Workspace 생성 프로세스를 완료할 수 있습니다. 새 Workspace를 처음 열고 EMR 클러스터 패널을 선택하면 선택한 클러스터가 연결되어 있음을 알 수 있습니다.

In the Workspace UI
Workspace 사용자 인터페이스에서 EKS 클러스터EMR에 Amazon을 연결하려면
  1. 클러스터에 연결하려는 Workspace의 왼쪽 사이드바에서 EMR 클러스터 아이콘을 선택하여 클러스터 패널을 엽니다.

  2. 클러스터 유형 드롭다운을 확장하고 에서 EMR 클러스터를 EKS선택합니다.

  3. 의 EMR 클러스터EKS에서 드롭다운 목록에서 클러스터를 선택합니다.

  4. 엔드포인트에서 Workspace에 연결할 관리형 엔드포인트를 선택합니다. 관리형 엔드포인트는 EMR Studio가 선택한 클러스터와 통신할 수 있게 해주는 게이트웨이입니다.

  5. 연결을 선택합니다. 클러스터가 연결되면 성공 메시지가 표시됩니다.

Amazon EMR Serverless 애플리케이션을 EMR Studio Workspace에 연결

Workspace를 EMR Serverless 애플리케이션에 연결하여 대화형 워크로드를 실행할 수 있습니다. 자세한 내용은 노트북을 사용하여 EMR Studio를 통해 EMR Serverless를 사용하여 대화형 워크로드 실행을 참조하세요.

참고

IAM Identity Center의 신뢰할 수 있는 자격 증명 전파를 사용하는 EMR Studio에는 EMR Serverless 애플리케이션을 연결할 수 없습니다.

예 의 EMR 서버리스 애플리케이션에 Workspace 연결 JupyterLab

Workspace를 EMR Serverless 애플리케이션에 연결하려면 먼저 계정 관리자가 대화형 워크로드에 대한 필수 권한에 설명된 대로 액세스 권한을 부여해야 합니다.

  1. EMR Studio로 이동하여 Workspace를 선택한 다음 Workspace 시작 > 빠른 시작을 선택합니다.

  2. 내부에서 왼쪽 사이드바의 클러스터 탭을 JupyterLab엽니다.

  3. EMR Serverless를 컴퓨팅 옵션으로 선택한 다음 EMR Serverless 애플리케이션과 런타임 역할을 선택합니다.

  4. 클러스터를 Workspace에 연결하려면 연결을 선택합니다.

이제 이 Workspace를 열면 선택한 애플리케이션이 연결된 것을 확인할 수 있습니다.

EMR Studio Workspace에 새 EMR 클러스터 생성 및 연결

Advanced EMR Studio 사용자는 Amazon에서 실행되는 새 EMR 클러스터를 프로비저닝EC2하여 Workspace와 함께 사용할 수 있습니다. 새 클러스터에는 기본적으로 EMR Studio에 필요한 모든 빅 데이터 애플리케이션이 설치되어 있습니다.

클러스터를 생성하려면 Studio 관리자가 먼저 세션 정책을 사용하여 권한을 부여해야 합니다. 자세한 내용은 EMR Studio 사용자를 위한 권한 정책 생성 단원을 참조하십시오.

Workspace 생성 대화 상자 또는 Workspace UI의 클러스터 패널에서 새 클러스터를 생성할 수 있습니다. 어느 쪽이든 다음 두 가지 클러스터 생성 옵션이 제공됩니다.

  1. EMR 클러스터 생성 - Amazon EC2 인스턴스 유형 및 개수를 선택하여 EMR 클러스터를 생성합니다.

  2. 클러스터 템플릿 사용 - 사전 정의된 클러스터 템플릿을 선택하여 클러스터를 프로비저닝합니다. 이 옵션은 클러스터 템플릿을 사용할 권한이 있는 경우에 나타납니다.

    참고

    Studio용 IAM Identity Center에서 신뢰할 수 있는 자격 증명 전파를 활성화한 경우 템플릿을 사용하여 클러스터를 생성해야 합니다.

EMR 클러스터 구성을 제공하여 클러스터를 생성하려면
  1. 시작 지점을 선택합니다.

    원하는 작업 수행할 작업
    Workspace 생성 대화 상자를 사용하여 Workspace를 생성할 때 클러스터를 생성합니다. Workspace 생성 대화 상자에서 고급 구성 섹션을 확장하고 EMR 클러스터 생성을 선택합니다.
    Workspace를 생성한 후 Workspace UI의 EMR 클러스터 패널에서 클러스터를 생성합니다. 열린 Workspace의 왼쪽 사이드바에서 EMR 클러스터 탭을 선택하고 고급 구성 섹션을 확장한 다음 클러스터 생성을 선택합니다.
  2. 클러스터 이름을 입력합니다. 클러스터 이름을 지정하면 나중에 EMR Studio 클러스터 목록에서 클러스터 이름을 찾을 수 있습니다.

  3. Amazon EMR 릴리스의 경우 클러스터의 Amazon EMR 릴리스 버전을 선택합니다.

  4. 인스턴스에서 클러스터의 Amazon EC2 인스턴스 유형과 수를 선택합니다. 인스턴스 유형 선택에 대한 자세한 내용은 Amazon과 함께 사용할 Amazon EC2 인스턴스 유형 구성 EMR 섹션을 참조하세요. 인스턴스 하나가 프라이머리 노드에 사용됩니다.

  5. EMR Studio가 새 클러스터를 시작할 수 있는 서브넷을 선택합니다. 각 서브넷 옵션은 Studio 관리자의 사전 승인을 받으며 Workspace는 나열된 모든 서브넷의 클러스터에 연결할 수 있어야 합니다.

  6. 로그 스토리지URI용 S3를 선택합니다.

  7. EMR 클러스터 생성을 선택하여 클러스터를 프로비저닝합니다. Workspace 생성 대화 상자를 사용하는 경우 Workspace 생성을 선택하여 Workspace를 생성하고 클러스터를 프로비저닝합니다. EMR Studio가 새 클러스터를 프로비저닝한 후 클러스터를 Workspace에 연결합니다.

클러스터 템플릿 사용하여 클러스터를 생성하는 방법
  1. 시작 지점을 선택합니다.

    원하는 작업 수행할 작업
    Workspace 생성 대화 상자를 사용하여 Workspace를 생성할 때 클러스터를 생성합니다. Workspace 생성 대화 상자에서 고급 구성 섹션을 확장하고 클러스터 템플릿 사용을 선택합니다.
    Workspace UI의 클러스터 패널에서 EMR 클러스터를 생성합니다. 열린 Workspace의 왼쪽 사이드바에서 EMR 클러스터 탭을 선택하고 고급 구성 섹션을 확장한 다음 클러스터 템플릿을 선택합니다.
  2. 드롭다운 목록에서 클러스터 템플릿을 선택합니다. 사용 가능한 각 클러스터 템플릿에는 선택에 도움이 되는 간략한 설명이 포함되어 있습니다.

  3. 선택한 클러스터 템플릿에는 Amazon EMR 릴리스 버전 또는 클러스터 이름과 같은 추가 파라미터가 있을 수 있습니다. 값을 선택 또는 삽입하거나 관리자가 선택한 기본값을 사용할 수 있습니다.

  4. EMR Studio가 새 클러스터를 시작할 수 있는 서브넷을 선택합니다. 각 서브넷 옵션은 Studio 관리자의 사전 승인을 받으며 Workspace는 모든 서브넷의 클러스터에 연결할 수 있어야 합니다.

  5. 클러스터 템플릿 사용을 선택하여 클러스터를 프로비전하고 Workspace에 연결합니다. EMR Studio가 클러스터를 생성하는 데 몇 분 정도 걸립니다. Workspace 생성 대화 상자를 사용하는 경우 Workspace 생성을 선택하여 Workspace를 생성하고 클러스터를 프로비저닝합니다. EMR Studio가 새 클러스터를 프로비저닝하면 클러스터가 Workspace에 연결됩니다.

EMR Studio Workspace에서 컴퓨팅 분리

Workspace에 연결된 클러스터를 교환하려면 Workspace UI에서 클러스터를 분리하면 됩니다.

WorkSpaces에서 클러스터를 분리하는 방법
  1. 클러스터에서 분리하려는 Workspace의 왼쪽 사이드바에서 EMR 클러스터 아이콘을 선택하여 클러스터 패널을 엽니다.

  2. 클러스터 선택에서 분리를 선택하고 EMR Studio가 클러스터를 분리할 때까지 기다립니다. 클러스터가 분리되면 성공 메시지가 표시됩니다.

EMR Studio Workspace에서 EMR Serverless 애플리케이션을 분리하려면

Workspace에 연결된 컴퓨팅을 교환하려면 Workspace UI에서 애플리케이션을 분리하면 됩니다.

  1. 클러스터에서 분리하려는 Workspace의 왼쪽 사이드바에서 Amazon EMR 컴퓨팅 아이콘을 선택하여 컴퓨팅 패널을 엽니다.

  2. 컴퓨팅 선택에서 분리를 선택하고 EMR Studio가 애플리케이션을 분리할 때까지 기다립니다. 애플리케이션이 분리되면 성공 메시지가 표시됩니다.