Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.
Apache Livy
Livy permite la interacción a través de una REST interfaz con un EMR clúster que ejecuta Spark. Puedes usar la REST interfaz o una biblioteca RPC cliente para enviar trabajos de Spark o fragmentos de código de Spark, recuperar los resultados de forma sincrónica o asíncrona y administrar Spark Context. Para obtener más información, consulte el sitio web de Apache Livy
Para acceder a la interfaz web de Livy, configure un SSH túnel hacia el nodo maestro y una conexión proxy. Para obtener más información, consulte Ver las interfaces web alojadas en EMR clústeres.
La siguiente tabla muestra la versión de Livy incluida en la última versión de la serie Amazon EMR 7.x, junto con los componentes que Amazon EMR instala con Livy.
Etiqueta de EMR lanzamiento de Amazon | Versión de Livy | Componentes instalados con Livy |
---|---|---|
emr-7.5.0 |
Livy 0.8.0 |
emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
La siguiente tabla muestra la versión de Livy incluida en la última versión de la serie Amazon EMR 6.x, junto con los componentes que Amazon EMR instala con Livy.
Para ver la versión de los componentes instalados con Livy en esta versión, consulte Versiones de los componentes de la versión 6.15.0.
Etiqueta de EMR lanzamiento de Amazon | Versión de Livy | Componentes instalados con Livy |
---|---|---|
emr-6.15.0 |
Livy 0.7.1 |
aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
La siguiente tabla muestra la versión de Livy incluida en la última versión de la serie Amazon EMR 5.x, junto con los componentes que Amazon EMR instala con Livy.
Para ver la versión de los componentes instalados con Livy en esta versión, consulte Versiones del componente de la versión 5.36.2.
Etiqueta de EMR lanzamiento de Amazon | Versión de Livy | Componentes instalados con Livy |
---|---|---|
emr-5.36.2 |
Livy 0.7.1 |
aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |