Amazon EMR on EKS 5.33.0 リリース - Amazon EMR

Amazon EMR on EKS 5.33.0 リリース

Amazon EMR on EKS では、次の Amazon EMR 5.33.0 リリースが利用可能です。特定の emr-5.33.0-XXXX リリースを選択すると、関連するコンテナイメージタグなどの詳細が表示されます。

Amazon EMR 5.33.0 のリリースノート

  • 新機能‐5.x リリースシリーズの Amazon EMR 5.33.0 以降、Amazon EMR on EKS は Spark のポッドテンプレート機能をサポートしています。詳細については、「ポッドテンプレートの使用」を参照してください。

  • サポートされているアプリケーション - Spark 2.4.7-amzn-1、Jupyter Enterprise Gateway (エンドポイント、パブリックプレビュー、Scala カーネルはサポート対象外)。

  • サポートされるコンポーネント‐aws-hm-client (Glue コネクタ) 、aws-sagemaker-spark-sdk、emr-s3-select、emrfs、emr-ddb、hudi-spark。

  • サポートされている設定分類 :

    分類 説明

    core-site

    Hadoop の core-site.xml ファイルの値を変更します。

    emrfs-site

    EMRFS の設定を変更します。

    spark-metrics

    Spark の metrics.properties ファイルの値を変更します。

    spark-defaults

    Spark の spark-defaults.conf ファイルの値を変更します。

    spark-env

    Spark 環境の値を変更します。

    spark-hive-site

    Spark の hive-site.xml ファイルの値を変更します

    spark-log4j

    Spark の log4j.properties ファイルの値を変更します。

    設定分類を使用すると、アプリケーションをカスタマイズできます。これらは多くの場合、spark-hive-site.xml などのアプリケーションの構成 XML ファイルに対応します。詳細については、「アプリケーションの設定」を参照してください。