Spark 운영자에서 Spark 작업 실행 - Amazon EMR

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

Spark 운영자에서 Spark 작업 실행

Amazon EMR 릴리스 6.10.0 이상은 Apache Spark용 Kubernetes 연산자 또는 EMR의 Amazon용 작업 제출 모델인 Spark 연산자를 지원합니다EKS. Spark 운영자를 사용하면 자체 Amazon EKS 클러스터에서 Amazon EMR 릴리스 런타임을 사용하여 Spark 애플리케이션을 배포하고 관리할 수 있습니다. Amazon EKS 클러스터에 Spark 연산자를 배포한 후에는 연산자와 함께 Spark 애플리케이션을 직접 제출할 수 있습니다. 운영자는 Spark 애플리케이션의 수명 주기를 관리합니다.

참고

Amazon은 vCPU 및 메모리 소비를 EKS 기준으로 Amazon에 대한 요금을 EMR 계산합니다. 이 계산은 드라이버 및 실행기 포드에 적용됩니다. 이 계산은 Amazon EMR 애플리케이션 이미지를 다운로드할 때부터 Amazon EKS 포드가 종료될 때까지 시작되며 가장 가까운 초로 반올림됩니다.