Amazon nelle EMR versioni EKS 6.12.0 - Amazon EMR
RilasciNote di rilascioFunzionalità

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Amazon nelle EMR versioni EKS 6.12.0

Questa pagina descrive le funzionalità nuove e aggiornate per Amazon EMR specifiche per Amazon EMR on EKS deployment. Per dettagli su Amazon EMR in esecuzione su Amazon EC2 e sulla versione Amazon EMR 6.12.0 in generale, consulta Amazon EMR6.12.0 nella Amazon Release Guide. EMR

Amazon EMR nelle versioni EKS 6.12

Le seguenti versioni di Amazon EMR 6.12.0 sono disponibili per Amazon EMR su. EKS Seleziona una XXXX versione emr-6.12.0- specifica per visualizzare ulteriori dettagli, come il relativo tag di immagine del contenitore.

  • emr-6.12.0-latest

  • emr-6.12.0-20240321

  • emr-6.12.0-20230701

  • emr-6.12.0- spark-rapids-latest

  • emr-6.12.0-spark-rapids-20230701

  • emr-6.12.0-java11-latest

  • emr-6.12.0-java11-20230701

  • emr-6.12.0-java17-latest

  • emr-6.12.0-java17-20230701

  • emr-6.12.0- spark-rapids-java 17 - più recente

  • emr-6.12.0- spark-rapids-java 17-20230701

  • notebook-spark/emr-6.12.0-latest

  • notebook-spark/emr-6.12.0-20230701

  • taccuino - spark/emr-6.12.0- spark-rapids-latest

  • notebook-spark/emr-6.12.0-spark-rapids-20230701

  • notebook-python/emr-6.12.0-latest

  • notebook-python/emr-6.12.0-20230701

  • notebook-python/emr-6.12.0- spark-rapids-latest

  • notebook-python/emr-6.12.0-spark-rapids-20230701

Note di rilascio

Note di rilascio per Amazon alla versione EMR EKS 6.12.0

  • Applicazioni supportate ‐ AWS SDK for Java 1.12.490, Apache Spark 3.4.0-amzn-0, Apache Hudi 0.13.1-amzn-0, Apache Iceberg 1.3.0-amzn-0, Delta 2.4.0, Apache Spark 23.06.0-amzn-0, Jupyter Enterprise Gateway 2.6.0 RAPIDS

  • Componenti supportati: aws-sagemaker-spark-sdk, emr-ddb, emr-goodies, emr-s3-select, emrfs, hadoop-client, hudi, hudi-spark, iceberg, spark-kubernetes.

  • Classificazioni di configurazione supportate

    CreateManagedEndpointAPIsDa utilizzare con e: StartJobRun

    Classificazioni Descrizioni

    core-site

    Modifica i valori nel file Hadoop core-site.xml.

    emrfs-site

    Modificare EMRFS le impostazioni.

    spark-metrics

    Modifica i valori nel file Spark metrics.properties.

    spark-defaults

    Modifica i valori nel file Spark spark-defaults.conf.

    spark-env

    Modifica i valori nell'ambiente Spark.

    spark-hive-site

    Modifica i valori nel file Spark hive-site.xml.

    spark-log4j

    Modifica i valori nel file Spark log4j2.properties.

    emr-job-submitter

    Configurazione per il pod del mittente di processi.

    Da utilizzare specificamente con CreateManagedEndpointAPIs:

    Classificazioni Descrizioni

    jeg-config

    Modifica i valori nel file jupyter_enterprise_gateway_config.py Jupyter Enterprise Gateway.

    jupyter-kernel-overrides

    Modifica il valore per l'immagine del kernel nel file Jupyter Kernel Spec.

    Le classificazioni di configurazione consentono di personalizzare le applicazioni. Spesso corrispondono a un XML file di configurazione per l'applicazione, ad esempiospark-hive-site.xml. Per ulteriori informazioni, consulta la sezione Configurazione delle applicazioni.

Funzionalità significative

Le seguenti funzionalità sono incluse nella versione 6.12 di Amazon EMR onEKS.

  • Java 17: con EMR Amazon EKS 6.12 e versioni successive, puoi avviare Spark con Java 17 runtime. Per farlo, trasmetti emr-6.12.0-java17-latest come etichetta di rilascio. Consigliamo di convalidare ed eseguire test delle prestazioni prima di trasferire i carichi di lavoro di produzione da versioni precedenti dell'immagine Java all'immagine Java 17.