Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Configurar EMR CloudFormation las plantillas de Amazon en el Service Catalog

En este tema se presupone que los administradores están familiarizados con AWS CloudFormationlas carteras y los productos de Amazon AWS Service Catalog, así como con Amazon EMR.

Para simplificar la creación de EMR clústeres de Amazon desde Studio, los administradores pueden registrar una EMR CloudFormation plantilla de Amazon como producto de una AWS Service Catalogcartera. Para que la plantilla esté disponible para los científicos de datos, deben asociar la cartera con la función de SageMaker ejecución utilizada en Studio o Studio Classic. Por último, para permitir a los usuarios descubrir plantillas, aprovisionar clústeres y conectarse a EMR clústeres de Amazon desde Studio o Studio Classic, los administradores deben establecer los permisos de acceso adecuados.

EMR AWS CloudFormation Las plantillas de Amazon permiten a los usuarios finales personalizar varios aspectos del clúster. Por ejemplo, los administradores pueden definir una lista aprobada de tipos de instancias entre los que los usuarios pueden elegir al crear un clúster.

En las siguientes instrucciones, se utilizan end-to-end CloudFormation pilas para configurar un dominio de Studio o Studio Classic, un perfil de usuario, una cartera de Service Catalog y rellenar una plantilla de EMR lanzamiento de Amazon. En los siguientes pasos, se destacan los ajustes específicos que los administradores deben aplicar en su end-to-end stack para permitir que Studio o Studio Classic accedan a los productos de Service Catalog y aprovisionen EMR los clústeres de Amazon.

Para permitir que los científicos de datos descubran EMR CloudFormation las plantillas de Amazon y aprovisionen los clústeres de Studio o Studio Classic, sigue estos pasos.

Paso 0: Comprueba tu red y prepara tu CloudFormation plantilla

Antes de empezar:

Paso 1: Asocie su cartera de Service Catalog a SageMaker

En su cartera de Service Catalog, asocie su ID de cartera con la función de SageMaker ejecución que accede al clúster.

Para ello, añada la siguiente sección (aquí en YAML formato) a su pila. Esto otorga al rol de SageMaker ejecución acceso a la cartera de Service Catalog especificada que contiene productos como EMR las plantillas de Amazon. Permite que los roles que asuma el lanzamiento SageMaker de esos productos sean asumidos.

Reemplazar SageMakerExecutionRole.Arn y SageMakerStudioEMRProductPortfolio.ID con sus valores reales.

SageMakerStudioEMRProductPortfolioPrincipalAssociation:
    Type: AWS::ServiceCatalog::PortfolioPrincipalAssociation
    Properties:
      PrincipalARN: SageMakerExecutionRole.Arn
      PortfolioId: SageMakerStudioEMRProductPortfolio.ID
      PrincipalType: IAM

Paso 2: Hacer referencia a una EMR plantilla de Amazon en un producto de Service Catalog

En un producto de Service Catalog de su cartera, consulte un recurso de EMR plantilla de Amazon y asegúrese de que esté visible en Studio o Studio Classic.

Para ello, haga referencia al recurso de EMR plantilla de Amazon en la definición del producto de Service Catalog y, a continuación, añada el siguiente "sagemaker:studio-visibility:emr" conjunto de claves de etiquetas al valor "true" (consulte el ejemplo en YAML formato).

En la definición del producto de Service Catalog, se hace referencia a la AWS CloudFormation plantilla del clúster medianteURL. La etiqueta adicional establecida en true garantiza la visibilidad de las EMR plantillas de Amazon en Studio o Studio Classic.

SMStudioEMRNoAuthProduct:
    Type: AWS::ServiceCatalog::CloudFormationProduct
    Properties:
      Owner: AWS
      Name: SageMaker Studio Domain No Auth EMR
      ProvisioningArtifactParameters:
        - Name: SageMaker Studio Domain No Auth EMR
          Description: Provisions a SageMaker domain and No Auth EMR Cluster
          Info:
            LoadTemplateFromURL: Link to your CloudFormation template. For example, https://aws-blogs-artifacts-public.s3.amazonaws.com/artifacts/astra-m4-sagemaker/end-to-end/CFN-EMR-NoStudioNoAuthTemplate-v3.yaml
      Tags:
        - Key: "sagemaker:studio-visibility:emr"
          Value: "true"

Paso 3: Parametrizar la plantilla de Amazon EMR CloudFormation

La CloudFormation plantilla utilizada para definir el EMR clúster de Amazon en el producto Service Catalog permite a los administradores especificar parámetros configurables. Los administradores pueden definir Default valores y AllowedValues rangos para estos parámetros en la Parameters sección de la plantilla. Durante el proceso de lanzamiento del clúster, los científicos de datos pueden proporcionar entradas personalizadas o seleccionar entre esas opciones predefinidas para personalizar determinados aspectos de su EMR clúster de Amazon.

El siguiente ejemplo ilustra los parámetros de entrada adicionales que los administradores pueden establecer al crear una EMR plantilla de Amazon.

"Parameters": {
    "EmrClusterName": {
      "Type": "String",
      "Description": "EMR cluster Name."
    },
    "MasterInstanceType": {
      "Type": "String",
      "Description": "Instance type of the EMR master node.",
      "Default": "m5.xlarge",
      "AllowedValues": [
        "m5.xlarge",
        "m5.2xlarge",
        "m5.4xlarge"
      ]
    },
    "CoreInstanceType": {
      "Type": "String",
      "Description": "Instance type of the EMR core nodes.",
      "Default": "m5.xlarge",
      "AllowedValues": [
        "m5.xlarge",
        "m5.2xlarge",
        "m5.4xlarge",
        "m3.medium",
        "m3.large",
        "m3.xlarge",
        "m3.2xlarge"
      ]
    },
    "CoreInstanceCount": {
      "Type": "String",
      "Description": "Number of core instances in the EMR cluster.",
      "Default": "2",
      "AllowedValues": [
        "2",
        "5",
        "10"
      ]
    },
    "EmrReleaseVersion": {
      "Type": "String",
      "Description": "The release version of EMR to launch.",
      "Default": "emr-5.33.1",
      "AllowedValues": [
        "emr-5.33.1",
        "emr-6.4.0"
      ]
    }
  }

Una vez que los administradores hayan hecho que las EMR CloudFormation plantillas de Amazon estén disponibles en Studio, los científicos de datos pueden utilizarlas para aprovisionar automáticamente los EMR clústeres de Amazon. La Parameters sección definida en la plantilla se traduce en campos de entrada en el formulario de creación del clúster en Studio o Studio Classic. Para cada parámetro, los científicos de datos pueden introducir un valor personalizado en el cuadro de entrada o seleccionar una de las opciones predefinidas que aparecen en un menú desplegable, que corresponde a las AllowedValues especificadas en la plantilla.

La siguiente ilustración muestra el formulario dinámico ensamblado a partir de una EMR plantilla de CloudFormation Amazon para crear un EMR clúster de Amazon en Studio o Studio Classic.

Visite Lanza un EMR clúster de Amazon desde Studio o Studio Classic para obtener información sobre cómo lanzar un clúster desde Studio o Studio Classic con esas EMR plantillas de Amazon.

Paso 4: Configura los permisos para habilitar la publicación y el lanzamiento de EMR clústeres de Amazon desde Studio

Por último, adjunta los IAM permisos necesarios para poder publicar los EMR clústeres de Amazon en ejecución existentes y autoaprovisionar nuevos clústeres desde Studio o Studio Classic.

Los roles a los que debes añadir esos permisos dependen de si Studio o Studio Classic y Amazon EMR están desplegados en la misma cuenta (elige Cuenta única) o en cuentas diferentes (elige Cuenta cruzada).