Apache Livy - Amazon EMR

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Apache Livy

Livy ermöglicht die Interaktion über eine REST Schnittstelle mit einem EMR Cluster, auf dem Spark ausgeführt wird. Sie können die REST Schnittstelle oder eine RPC Client-Bibliothek verwenden, um Spark-Jobs oder Spark-Codefragmente einzureichen, Ergebnisse synchron oder asynchron abzurufen und Spark-Kontext zu verwalten. Weitere Informationen finden Sie auf der Apache Livy-Website. Livy ist in der EMR Amazon-Release-Version 5.9.0 und höher enthalten.

Um auf die Livy-Weboberfläche zuzugreifen, richten Sie einen SSH Tunnel zum Master-Knoten und eine Proxyverbindung ein. Weitere Informationen finden Sie unter Auf EMR Clustern gehostete Weboberflächen anzeigen.

In der folgenden Tabelle sind die Version von Livy aufgeführt, die in der neuesten Version der Amazon EMR 7.x-Serie enthalten ist, sowie die Komponenten, die Amazon mit Livy EMR installiert.

Informationen zur Version der Komponenten, die in dieser Version mit Livy installiert wurden, finden Sie unter Komponentenversionen von Version 7.3.0.

Livy-Versionsinformationen für emr-7.3.0
EMRAmazon-Freigabeetikett Livy-Version Mit Livy installierte Komponenten

emr-7.3.0

Livy 0.8.0

emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx

In der folgenden Tabelle sind die Version von Livy aufgeführt, die in der neuesten Version der Amazon EMR 6.x-Serie enthalten ist, sowie die Komponenten, die Amazon mit Livy EMR installiert.

Die Version der Komponenten, die mit Livy in dieser Version installiert wurden, finden Sie unter Komponentenversionen der Version 6.15.0.

Livy-Versionsinformationen für emr-6.15.0
EMRAmazon-Freigabeetikett Livy-Version Mit Livy installierte Komponenten

emr-6.15.0

Livy 0.7.1

aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx

In der folgenden Tabelle sind die Version von Livy aufgeführt, die in der neuesten Version der Amazon EMR 5.x-Serie enthalten ist, sowie die Komponenten, die Amazon mit Livy EMR installiert.

Informationen zur Version der Komponenten, die in dieser Version mit Livy installiert wurden, finden Sie unter Komponentenversionen von Version 5.36.2.

Livy-Versionsinformationen für emr-5.36.2
EMRAmazon-Freigabeetikett Livy-Version Mit Livy installierte Komponenten

emr-5.36.2

Livy 0.7.1

aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx