Amazon EMR on EKS 5.33.0 版本 - Amazon EMR

Amazon EMR on EKS 5.33.0 版本

以下 Amazon EMR 5.33.0 版本适用于 Amazon EMR on EKS。选择特定的 emr-5.33.0-XXXX 版本以查看更多详细信息,例如相关的容器映像标签。

Amazon EMR 5.33.0 的版本注释

  • 新功能 - 从 5.x 版本系列中的 Amazon EMR 5.33.0 开始,Amazon EMR on EKS 支持 Spark 的 Pod 模板功能。有关更多信息,请参阅 使用 Pod 模板

  • 支持的应用程序 – Spark 2.4.7-amzn-1、Jupyter Enterprise Gateway(端点,公开预览版;不支持 Scala 内核)。

  • 受支持的组件 – aws-hm-client(Glue 连接器)、aws-sagemaker-spark-sdkemr-s3-selectemrfsemr-ddbhudi-spark

  • 受支持的配置分类:

    分类 描述

    core-site

    更改 Hadoop 的 core-site.xml 文件中的值。

    emrfs-site

    更改 EMRFS 设置。

    spark-metrics

    更改 Spark 的 metrics.properties 文件中的值。

    spark-defaults

    更改 Spark 的 spark-defaults.conf 文件中的值。

    spark-env

    更改 Spark 环境中的值。

    spark-hive-site

    更改 Spark 的 hive-site.xml 文件中的值。

    spark-log4j

    更改 Spark 的 log4j.properties 文件中的值。

    配置分类允许您自定义应用程序。这些通常与应用程序的配置 XML 文件(如 spark-hive-site.xml)相对应。有关更多信息,请参阅配置应用程序