Amazon EMR on EKS 6.6.0 リリース - Amazon EMR

Amazon EMR on EKS 6.6.0 リリース

Amazon EMR on EKS では、次の Amazon EMR 6.6.0 リリースが利用可能です。特定の emr-6.6.0-XXXX リリースを選択すると、関連するコンテナイメージタグなどの詳細が表示されます。

Amazon EMR 6.6.0 のリリースノート

  • サポートされているアプリケーション - Spark 3.2.0-amzn-0、Jupyter Enterprise Gateway (エンドポイント、パブリックプレビュー)、Hudi 0.10.1-amzn-0、Iceberg 0.13.1。

  • サポートされるコンポーネント‐aws-hm-client (Glue コネクタ) 、aws-sagemaker-spark-sdk、emr-s3-select、emrfs、emr-ddb、hudi-spark。

  • サポートされている設定分類 :

    分類 説明

    core-site

    Hadoop の core-site.xml ファイルの値を変更します。

    emrfs-site

    EMRFS の設定を変更します。

    spark-metrics

    Spark の metrics.properties ファイルの値を変更します。

    spark-defaults

    Spark の spark-defaults.conf ファイルの値を変更します。

    spark-env

    Spark 環境の値を変更します。

    spark-hive-site

    Spark の hive-site.xml ファイルの値を変更します

    spark-log4j

    Spark の log4j.properties ファイルの値を変更します。

    設定分類を使用すると、アプリケーションをカスタマイズできます。これらは多くの場合、spark-hive-site.xml などのアプリケーションの構成 XML ファイルに対応します。詳細については、「アプリケーションの設定」を参照してください。

既知の問題

  • Amazon EMR on EKS リリース 6.4、6.5、6.6 では、インタラクティブエンドポイントで Spark ポッドテンプレート機能を使用できません。

解決された問題

  • インタラクティブエンドポイントログが、Cloudwatch と S3 にアップロードされます。