Uso de Apache Livy con Amazon EMR en EKS
Con las versiones 7.1.0 y posteriores de Amazon EMR, puede utilizar Apache Livy para enviar trabajos en Amazon EMR en EKS. Mediante Apache Livy, puede configurar su propio punto de conexión REST de Apache Livy y usarlo para implementar y administrar aplicaciones de Spark en sus clústeres de Amazon EKS. Una vez que haya instalado Livy en su clúster de Amazon EKS, puede utilizar el punto de conexión de Livy para enviar las aplicaciones de Spark a su servidor de Livy. El servidor administra el ciclo de vida de las aplicaciones de Spark.
nota
Amazon EMR calcula los precios de Amazon EKS en función de la vCPU y el consumo de memoria. Este cálculo se aplica a los pods de controladores y ejecutores. Este cálculo comienza cuando usted descarga la imagen de la aplicación de Amazon EMR hasta que finaliza el pod de Amazon EKS y se redondea al segundo más cercano.
Temas
- Configuración de Apache Livy para Amazon EMR en EKS
- Introducción a Apache Livy en Amazon EMR en EKS
- Ejecución de una aplicación de Spark con Apache Livy para Amazon EMR en EKS
- Desinstalación de Apache Livy con Amazon EMR en EKS
- Seguridad de Apache Livy con Amazon EMR en EKS
- Propiedades de instalación de Apache Livy en las versiones de Amazon EMR en EKS.
- Solucione los errores comunes de formato de las variables de entorno