本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
Amazon EMR on EKS 6.6.0 版
以下 Amazon EMR 6.6.0 版本可用於 Amazon EMR on EKS。選取特定的 emr-6.6.0-XXXX 版本,以檢視更多詳細資訊,例如相關的容器映像標籤。
Amazon EMR on EKS 6.6.0 的版本資訊
-
支援的應用程式 - Spark 3.2.0-amzn-0、Jupyter Enterprise Gateway (端點、公開預覽)、Hudi 0.10.1-amzn-0、Iceberg 0.13.1。
-
支援的元件‐
aws-hm-client
(Glue 連接器)、aws-sagemaker-spark-sdk
、emr-s3-select
、emrfs
、emr-ddb
、hudi-spark
。 -
支援的組態分類:
分類 描述 core-site
變更 Hadoop 的 core-site.xml 檔案中的值。
emrfs-site
變更 EMRFS 設定。
spark-metrics
變更 Spark 中 metrics.properties 檔案的值。
spark-defaults
變更 Spark 的 spark-defaults.conf 檔案中的值。
spark-env
變更 Spark 環境中的值。
spark-hive-site
變更 Spark 的 hive-site.xml 檔案中的值
spark-log4j
變更 Spark 中 log4j.properties 檔案的值。
組態分類可讓您自訂應用程式。這些檔案通常對應於應用程式的組態 XML 檔案,例如 spark-hive-site.xml。如需詳細資訊,請參閱設定應用程式。
已知問題
-
具有互動端點的 Spark Pod 範本功能無法在 Amazon EMR on EKS 6.4、6.5 和 6.6 中運作。
已解決的問題
-
互動端點日誌會上傳到 Cloudwatch 和 S3。