Amazon EMR auf EKS 6.6.0-Versionen - Amazon EMR

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Amazon EMR auf EKS 6.6.0-Versionen

Die folgenden Amazon EMR 6.6.0-Versionen sind für Amazon EMR am EKS verfügbar. Wählen Sie eine bestimmte XXXXemr-6.6.0-Version aus, um weitere Details wie das zugehörige Container-Image-Tag anzuzeigen.

Versionshinweise für Amazon EMR 6.6.0

  • Unterstützte Anwendungen – Spark 3.2.0-amzn-0, Jupyter Enterprise Gateway (Endpunkte, öffentliche Vorversion), Hudi 0.10.1-amzn-0, Iceberg 0.13.1.

  • Unterstützte Komponenten – aws-hm-client (Glue-Konnektor), aws-sagemaker-spark-sdk, emr-s3-select, emrfs, emr-ddb, hudi-spark.

  • Unterstützte Konfigurationsklassifizierungen:

    Klassifizierungen Beschreibungen

    core-site

    Ändern Sie die Werte in der core-site.xml-Datei in Hadoop.

    emrfs-site

    EMRFSEinstellungen ändern.

    spark-metrics

    Ändert die Werte in der metrics.properties-Datei in Spark.

    spark-defaults

    Ändert die Werte in der spark-defaults.conf-Datei in Spark.

    spark-env

    Ändert die Werte in der Spark-Umgebung.

    spark-hive-site

    Ändern Sie die Werte in der hive-site.xml-Datei in Spark.

    spark-log4j

    Ändert die Werte in der log4j.properties-Datei in Spark.

    Mithilfe von Konfigurationsklassifizierungen können Sie Anwendungen anpassen. Diese entsprechen häufig einer XML Konfigurationsdatei für die Anwendung, z. B. spark-hive-site .xml. Weitere Informationen finden Sie unter Configuring Applications.

Bekanntes Problem

  • Die Spark-Pod-Vorlagenfunktion mit interaktiven Endpunkten funktioniert in EMR Amazon in den EKS Versionen 6.4, 6.5 und 6.6 nicht.

Gelöste Probleme

  • Interaktive Endpunktprotokolle werden auf Cloudwatch und S3 hochgeladen.