Spark 演算子を使用して Spark ジョブを実行する
Amazon EMR リリース 6.10.0 以降では、Amazon EMR on EKS のジョブ送信モデルとして、Apache Spark の Kubernetes 演算子、または Spark 演算子がサポートされています。Spark 演算子を使用すると、Amazon EMR リリースランタイムを使用して Spark アプリケーションを独自の Amazon EKS クラスターにデプロイおよび管理できます。Amazon EKS クラスターに Spark 演算子をデプロイすると、その演算子を使用して Spark アプリケーションを直接送信できます。演算子は Spark アプリケーションのライフサイクルを管理します。
注記
Amazon EMR は、vCPU とメモリ消費量に基づいて Amazon EKS の料金を算出します。この計算は、ドライバーポッドとエグゼキュターポッドに適用されます。この計算は、Amazon EMR アプリケーションイメージをダウンロードしてから Amazon EKS ポッドが終了するまでに開始され、秒単位で四捨五入されます。
トピック
