Amazon nelle EMR versioni EKS 6.14.0 - Amazon EMR
RilasciNote di rilascioFunzionalità

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Amazon nelle EMR versioni EKS 6.14.0

Questa pagina descrive le funzionalità nuove e aggiornate per Amazon EMR specifiche per Amazon EMR on EKS deployment. Per dettagli su Amazon EMR in esecuzione su Amazon EC2 e sulla versione Amazon EMR 6.14.0 in generale, consulta Amazon EMR6.14.0 nella Amazon Release Guide. EMR

Amazon EMR nelle versioni EKS 6.14

Le seguenti versioni di Amazon EMR 6.14.0 sono disponibili per Amazon EMR su. EKS Seleziona una XXXX versione emr-6.14.0- specifica per visualizzare ulteriori dettagli, come il relativo tag di immagine del contenitore.

  • emr-6.14.0-latest

  • emr-6.14.0-20231005

  • emr-6.14.0-spark-rapids-latest

  • emr-6.14.0-spark-rapids-20231005

  • emr-6.14.0-java11-latest

  • emr-6.14.0-java11-20231005

  • emr-6.14.0-java17-latest

  • emr-6.14.0-java17-20231005

  • emr-6.14.0-java17-al2023-latest

  • emr-6.14.0-java17-al2023-20231005

  • emr-6.14.0-spark-rapids-java17-latest

  • emr-6.14.0-spark-rapids-java17-20231005

  • emr-6.14.0-spark-rapids-java17-al2023-latest

  • emr-6.14.0-spark-rapids-java17-al2023-20231005

  • notebook-spark/emr-6.14.0-latest

  • notebook-spark/emr-6.14.0-20231005

  • notebook-spark/emr-6.14.0-spark-rapids-latest

  • notebook-spark/emr-6.14.0-spark-rapids-20231005

  • notebook-spark/emr-6.14.0-java11-latest

  • notebook-spark/emr-6.14.0-java11-20231005

  • notebook-spark/emr-6.14.0-java17-latest

  • notebook-spark/emr-6.14.0-java17-20231005

  • notebook-spark/emr-6.14.0-java17-al2023-latest

  • notebook-spark/emr-6.14.0-java17-al2023-20231005

  • notebook-python/emr-6.14.0-latest

  • notebook-python/emr-6.14.0-20231005

  • notebook-python/emr-6.14.0-spark-rapids-latest

  • notebook-python/emr-6.14.0-spark-rapids-20231005

  • notebook-python/emr-6.14.0-java11-latest

  • notebook-python/emr-6.14.0-java11-20231005

  • notebook-python/emr-6.14.0-java17-latest

  • notebook-python/emr-6.14.0-java17-20231005

  • notebook-python/emr-6.14.0-java17-al2023-latest

  • notebook-python/emr-6.14.0-java17-al2023-20231005

Note di rilascio

Note di rilascio per Amazon EMR su versione EKS 6.14.0

  • Applicazioni supportate ‐ AWS SDK for Java 1.12.543, Apache Spark 3.4.1-amzn-1, Apache Hudi 0.13.1-amzn-2, Apache Iceberg 1.3.0-amzn-0, Delta 2.4.0, Apache Spark 23.06.0-amzn-2, Jupyter Enterprise Gateway 2.7.0 RAPIDS

  • Componenti supportati: aws-sagemaker-spark-sdk, emr-ddb, emr-goodies, emr-s3-select, emrfs, hadoop-client, hudi, hudi-spark, iceberg, spark-kubernetes.

  • Classificazioni di configurazione supportate

    StartJobRunDa CreateManagedEndpointAPIsutilizzare con e:

    Classificazioni Descrizioni

    core-site

    Modifica i valori nel file Hadoop core-site.xml.

    emrfs-site

    Modificare EMRFS le impostazioni.

    spark-metrics

    Modifica i valori nel file Spark metrics.properties.

    spark-defaults

    Modifica i valori nel file Spark spark-defaults.conf.

    spark-env

    Modifica i valori nell'ambiente Spark.

    spark-hive-site

    Modifica i valori nel file Spark hive-site.xml.

    spark-log4j

    Modifica i valori nel file Spark log4j2.properties.

    emr-job-submitter

    Configurazione per il pod del mittente di processi.

    Da utilizzare specificamente con CreateManagedEndpointAPIs:

    Classificazioni Descrizioni

    jeg-config

    Modifica i valori nel file jupyter_enterprise_gateway_config.py Jupyter Enterprise Gateway.

    jupyter-kernel-overrides

    Modifica il valore per l'immagine del kernel nel file Jupyter Kernel Spec.

    Le classificazioni di configurazione consentono di personalizzare le applicazioni. Spesso corrispondono a un XML file di configurazione per l'applicazione, ad esempiospark-hive-site.xml. Per ulteriori informazioni, consulta la sezione Configurazione delle applicazioni.

Funzionalità significative

Le seguenti funzionalità sono incluse nella versione 6.14 di Amazon EMR onEKS.

  • Supporto per Apache Livy: Amazon EMR on EKS ora supporta Apache Livy con. spark-submit