Amazon EMR on EKS 6.3.0 リリース - Amazon EMR

Amazon EMR on EKS 6.3.0 リリース

Amazon EMR on EKS では、次の Amazon EMR 6.3.0 リリースが利用可能です。特定の emr-6.3.0-XXXX リリースを選択すると、関連するコンテナイメージタグなどの詳細が表示されます。

Amazon EMR 6.3.0 のリリースノート

  • 新機能‐6.x リリースシリーズの Amazon EMR 6.3.0 以降、Amazon EMR on EKS は Spark のポッドテンプレート機能をサポートしています。Amazon EMR on EKSの Spark イベントログローテーション機能をオンにすることもできます。詳細については、ポッドテンプレートの使用およびSpark イベントログのローテーションを使用するを参照してください。

  • サポートされているアプリケーション‐Spark 3.1.1-amzn-0、Jupyter エンタープライズゲートウェイ (エンドポイント、パブリックプレビュー) 。

  • サポートされるコンポーネント‐aws-hm-client (Glue コネクタ) 、aws-sagemaker-spark-sdk、emr-s3-select、emrfs、emr-ddb、hudi-spark。

  • サポートされている設定分類 :

    分類 説明

    core-site

    Hadoop の core-site.xml ファイルの値を変更します。

    emrfs-site

    EMRFS の設定を変更します。

    spark-metrics

    Spark の metrics.properties ファイルの値を変更します。

    spark-defaults

    Spark の spark-defaults.conf ファイルの値を変更します。

    spark-env

    Spark 環境の値を変更します。

    spark-hive-site

    Spark の hive-site.xml ファイルの値を変更します

    spark-log4j

    Spark の log4j.properties ファイルの値を変更します。

    設定分類を使用すると、アプリケーションをカスタマイズできます。これらは多くの場合、spark-hive-site.xml などのアプリケーションの構成 XML ファイルに対応します。詳細については、「アプリケーションの設定」を参照してください。