Crie AWS CloudFormation modelos para o Amazon EMR Studio

Para criar modelos EMR de cluster usando o Service Catalog

1. Crie um ou mais CloudFormation modelos. O local em que você armazenará os modelos fica a seu critério. Como os modelos são arquivos de texto formatados, você pode fazer upload deles no Amazon S3 ou mantê-los em seu sistema de arquivos local. Para saber mais sobre CloudFormation modelos, consulte Modelos no Guia do AWS CloudFormation usuário.

   Use as regras apresentadas a seguir para nomear os modelos ou comparar os nomes em relação ao padrão [a-zA-Z0-9][a-zA-Z0-9._-]*.

   • Os nomes dos modelos devem começar com uma letra ou com um número.

   • Os nomes dos modelos podem consistir somente em letras, números, pontos (.), sublinhados (_) e hifens (-).

   Cada modelo de cluster criado deve incluir as seguintes opções:

   Parâmetros de entrada

   • ClusterName — Um nome para o cluster para ajudar os usuários a identificá-lo após o provisionamento.

   Saída

   • ClusterId— O ID do cluster recém-provisionadoEMR.

   Veja a seguir um exemplo AWS CloudFormation de modelo em YAML formato para um cluster com dois nós. O modelo de exemplo inclui as opções de modelo obrigatórias e define parâmetros de entrada adicionais para EmrRelease e ClusterInstanceType.

   awsTemplateFormatVersion: 2010-09-09
   
   Parameters:
     ClusterName:
       Type: "String"
       Default: "Example_Two_Node_Cluster"
     EmrRelease:
       Type: "String"
       Default: "emr-6.2.0"
       AllowedValues:
       - "emr-6.2.0"
       - "emr-5.32.0"
     ClusterInstanceType:
       Type: "String"
       Default: "m5.xlarge"
       AllowedValues:
       - "m5.xlarge"
       - "m5.2xlarge"
   
   Resources:
     EmrCluster:
       Type: AWS::EMR::Cluster
       Properties:
         Applications:
         - Name: Spark
         - Name: Livy
         - Name: JupyterEnterpriseGateway
         - Name: Hive
         EbsRootVolumeSize: '10'
         Name: !Ref ClusterName
         JobFlowRole: EMR_EC2_DefaultRole
         ServiceRole: EMR_DefaultRole_V2
         ReleaseLabel: !Ref EmrRelease
         VisibleToAllUsers: true
         LogUri: 
           Fn::Sub: 's3://aws-logs-${AWS::AccountId}-${AWS::Region}/elasticmapreduce/'
         Instances:
           TerminationProtected: false
           Ec2SubnetId: 'subnet-ab12345c'
           MasterInstanceGroup:
             InstanceCount: 1
             InstanceType: !Ref ClusterInstanceType
           CoreInstanceGroup:
             InstanceCount: 1
             InstanceType: !Ref ClusterInstanceType
             Market: ON_DEMAND
             Name: Core
   
   Outputs:
     ClusterId:
       Value:
         Ref: EmrCluster
       Description: The ID of the  EMR cluster

2. Crie um portfólio para seus modelos de cluster na mesma AWS conta do seu Studio.

   1. Abra o AWS Service Catalog console em https://console.aws.amazon.com/servicecatalog/.

   2. Escolha Portfólios no menu de navegação à esquerda.

   3. Insira as informações solicitadas na página Criar portfólio.

   4. Escolha Criar. AWS Service Catalog cria o portfólio e exibe os detalhes do portfólio.

3. Use as etapas a seguir para adicionar seus modelos de cluster como produtos do AWS Service Catalog .

   1. Navegue até a página Produtos em Administração no console de gerenciamento do AWS Service Catalog .

   2. Escolha Fazer upload de novo produto.

   3. Insira um Nome do produto e um Proprietário.

   4. Especifique seu arquivo de modelo em Detalhes da versão.

   5. Escolha Analisar para analisar as configurações do produto e, em seguida, selecione Criar produto.

4. Conclua as etapas a seguir para adicionar os produtos ao seu portfólio.

   1. Navegue até a página Produtos no console de gerenciamento do AWS Service Catalog .

   2. Escolha seu produto, selecione Ações e, em seguida, clique em Adicionar produto ao portfólio.

   3. Escolha seu portfólio e, em seguida, escolha Adicionar produto ao portfólio.

5. Crie uma restrição de inicialização para seus produtos. Uma restrição de lançamento é uma IAM função que especifica as permissões do usuário para lançar um produto. Você pode personalizar suas restrições de lançamento, mas deve permitir permissões de uso, CloudFormation Amazon e. EMR AWS Service Catalog Para obter mais informações e instruções, consulte Service Catalog launch constraints.

6. Aplique a restrição de inicialização a cada produto do seu portfólio. Você deve aplicar a restrição de inicialização a cada produto individualmente.

   1. Selecione seu portfólio na página Portfólios no console de gerenciamento do AWS Service Catalog .

   2. Escolha a guia Constraints (Restrições) e Create constraint (Criar restrição).

   3. Escolha seu produto e selecione Inicialização em Tipo de restrição. Escolha Continuar.

   4. Selecione seu perfil de restrição de inicialização na seção Restrição de inicialização e, em seguida, escolha Criar.

7. Conceda acesso ao seu portfólio.

   1. Selecione seu portfólio na página Portfólios no console de gerenciamento do AWS Service Catalog .

   2. Expanda a guia Grupos, perfis e usuários e escolha Adicionar grupos, perfis e usuários.

   3. Procure sua IAM função no EMR Studio na guia Funções, selecione sua função e escolha Adicionar acesso.

      Se você usar...	Conceda acesso a...
      IAMautenticação	Seus usuários nativos
      IAMfederação	Seu IAM papel na federação
      IAMFederação de Centros de Identidade	Sua função de usuário do EMR Studio