Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.
Apache Livy
Livy ermöglicht die Interaktion über eine REST Schnittstelle mit einem EMR Cluster, auf dem Spark ausgeführt wird. Sie können die REST Schnittstelle oder eine RPC Client-Bibliothek verwenden, um Spark-Jobs oder Spark-Codefragmente einzureichen, Ergebnisse synchron oder asynchron abzurufen und Spark-Kontext zu verwalten. Weitere Informationen finden Sie auf der Apache Livy-Website
Um auf die Livy-Weboberfläche zuzugreifen, richten Sie einen SSH Tunnel zum Master-Knoten und eine Proxyverbindung ein. Weitere Informationen finden Sie unter Auf EMR Clustern gehostete Weboberflächen anzeigen.
In der folgenden Tabelle sind die Version von Livy aufgeführt, die in der neuesten Version der Amazon EMR 7.x-Serie enthalten ist, sowie die Komponenten, die Amazon mit Livy EMR installiert.
EMRAmazon-Freigabeetikett | Livy-Version | Mit Livy installierte Komponenten |
---|---|---|
emr-7.3.0 |
Livy 0.8.0 |
emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
In der folgenden Tabelle sind die Version von Livy aufgeführt, die in der neuesten Version der Amazon EMR 6.x-Serie enthalten ist, sowie die Komponenten, die Amazon mit Livy EMR installiert.
Die Version der Komponenten, die mit Livy in dieser Version installiert wurden, finden Sie unter Komponentenversionen der Version 6.15.0.
EMRAmazon-Freigabeetikett | Livy-Version | Mit Livy installierte Komponenten |
---|---|---|
emr-6.15.0 |
Livy 0.7.1 |
aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
In der folgenden Tabelle sind die Version von Livy aufgeführt, die in der neuesten Version der Amazon EMR 5.x-Serie enthalten ist, sowie die Komponenten, die Amazon mit Livy EMR installiert.
EMRAmazon-Freigabeetikett | Livy-Version | Mit Livy installierte Komponenten |
---|---|---|
emr-5.36.2 |
Livy 0.7.1 |
aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |