As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Apache Livy
O Livy permite a interação em uma REST interface com um EMR cluster executando o Spark. Você pode usar a REST interface ou uma biblioteca RPC cliente para enviar trabalhos do Spark ou trechos de código do Spark, recuperar resultados de forma síncrona ou assíncrona e gerenciar o Spark Context. Para obter mais informações, consulte o site do Apache Livy
Para acessar a interface web do Livy, configure um SSH túnel para o nó principal e uma conexão proxy. Para obter mais informações, consulte Exibir interfaces web hospedadas em EMR clusters.
A tabela a seguir lista a versão do Livy incluída na versão mais recente da série Amazon EMR 7.x, junto com os componentes que a Amazon EMR instala com o Livy.
Para a versão dos componentes instalados com o Livy nesta versão, consulte Versões de componentes da versão 7.3.0.
| Gravadora EMR de lançamento da Amazon | Versão do Livy | Componentes instalados com o Livy |
|---|---|---|
emr-7.3.0 |
Livy 0.8.0 |
emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
A tabela a seguir lista a versão do Livy incluída na versão mais recente da série Amazon EMR 6.x, junto com os componentes que a Amazon EMR instala com o Livy.
Para obter a versão dos componentes instalados com o Livy nessa versão, consulte Release 6.15.0 Component Versions.
| Gravadora EMR de lançamento da Amazon | Versão do Livy | Componentes instalados com o Livy |
|---|---|---|
emr-6.15.0 |
Livy 0.7.1 |
aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
A tabela a seguir lista a versão do Livy incluída na versão mais recente da série Amazon EMR 5.x, junto com os componentes que a Amazon EMR instala com o Livy.
Para a versão dos componentes instalados com o Livy nesta versão, consulte Versões de componentes da versão 5.36.2.
| Gravadora EMR de lançamento da Amazon | Versão do Livy | Componentes instalados com o Livy |
|---|---|---|
emr-5.36.2 |
Livy 0.7.1 |
aws-sagemaker-spark-sdk, emrfs, emr-goodies, emr-ddb, hadoop-client, hadoop-hdfs-datanode, hadoop-hdfs-library, hadoop-hdfs-namenode, hadoop-kms-server, hadoop-yarn-nodemanager, hadoop-yarn-resourcemanager, hadoop-yarn-timeline-server, hudi, hudi-spark, r, spark-client, spark-history-server, spark-on-yarn, spark-yarn-slave, livy-server, nginx |
