Versiones de Amazon EMR en EKS 5.33.0 - Amazon EMR

Versiones de Amazon EMR en EKS 5.33.0

Las siguientes versiones de Amazon EMR 5.33.0 están disponibles para Amazon EMR en EKS. Seleccione una versión específica de emr-5.33.0-XXXX para ver más detalles, como la etiqueta de imagen de contenedor relacionada.

Notas de la versión de Amazon EMR 5.33.0

  • Nueva característica: a partir de Amazon EMR 5.33.0 en la serie 5.x, Amazon EMR en EKS es compatible con la característica de plantillas de pods de Spark. Para obtener más información, consulte Uso de plantillas de pods.

  • Aplicaciones compatibles: Spark 2.4.7-amzn-1, Jupyter Enterprise Gateway (puntos de conexión, versión preliminar pública; el kernel de Scala no es compatible).

  • Componentes compatibles: aws-hm-client (conector de Glue), aws-sagemaker-spark-sdk, emr-s3-select, emrfs, emr-ddb, hudi-spark.

  • Clasificaciones de configuración compatibles:

    Clasificaciones Descripciones

    core-site

    Cambia los valores en el archivo core-site.xml de Hadoop.

    emrfs-site

    Cambiar la configuración de EMRFS.

    spark-metrics

    Cambiar los valores en el archivo metrics.properties de Spark.

    spark-defaults

    Cambiar los valores en el archivo spark-defaults.conf de Spark.

    spark-env

    Cambiar los valores en el entorno de Spark.

    spark-hive-site

    Cambia los valores en el archivo hive-site.xml de Spark.

    spark-log4j

    Cambiar los valores en el archivo log4j.properties de Spark.

    Las clasificaciones de configuración le permiten personalizar las aplicaciones. Suelen corresponder a un archivo de configuración XML de la aplicación, como spark-hive-site.xml. Para obtener más información, consulte Configuración de aplicaciones.