Versiones de Amazon EMR en EKS 6.4.0 - Amazon EMR

Versiones de Amazon EMR en EKS 6.4.0

Las siguientes versiones de Amazon EMR 6.4.0 están disponibles para Amazon EMR en EKS. Seleccione una versión específica de emr-6.4.0-XXXX para ver más detalles, como la etiqueta de imagen de contenedor relacionada.

Notas de la versión de Amazon EMR 6.4.0

  • Aplicaciones compatibles: Spark 3.1.2-amzn-0, Jupyter Enterprise Gateway (puntos de conexión, versión preliminar pública).

  • Componentes compatibles: aws-hm-client (conector de Glue), aws-sagemaker-spark-sdk, emr-s3-select, emrfs, emr-ddb, hudi-spark.

  • Clasificaciones de configuración compatibles:

    Clasificaciones Descripciones

    core-site

    Cambia los valores en el archivo core-site.xml de Hadoop.

    emrfs-site

    Cambiar la configuración de EMRFS.

    spark-metrics

    Cambiar los valores en el archivo metrics.properties de Spark.

    spark-defaults

    Cambiar los valores en el archivo spark-defaults.conf de Spark.

    spark-env

    Cambiar los valores en el entorno de Spark.

    spark-hive-site

    Cambia los valores en el archivo hive-site.xml de Spark.

    spark-log4j

    Cambiar los valores en el archivo log4j.properties de Spark.

    Las clasificaciones de configuración le permiten personalizar las aplicaciones. Suelen corresponder a un archivo de configuración XML de la aplicación, como spark-hive-site.xml. Para obtener más información, consulte Configuración de aplicaciones.

Problema conocido

  • La funcionalidad de la plantilla de pod de Spark con puntos de conexión interactivos no funciona en la versión 6.4 de Amazon EMR en EKS.