Execução de trabalhos do Spark com spark-submit - Amazon EMR

Execução de trabalhos do Spark com spark-submit

As versões 6.10.0 e superiores do Amazon EMR oferecem suporte ao spark-submit como uma ferramenta de linha de comando que você pode usar para enviar e executar aplicações do Spark para um cluster do Amazon EMR no EKS.

nota

O Amazon EMR calcula preços no Amazon EKS com base no consumo de memória e vCPU. Esse cálculo se aplica aos pods de drivers e de executores. Esse cálculo começa quando você baixa a imagem da aplicação do Amazon EMR até que o pod do Amazon EKS seja encerrado e arredondado para o segundo mais próximo.