Amazon EMR on EKS 6.15.0 릴리스 - Amazon EMR
출시릴리스 정보특성

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

Amazon EMR on EKS 6.15.0 릴리스

이 페이지에서EMR는 EMR EKS 배포 시 Amazon과 관련된 Amazon의 새로운 기능과 업데이트된 기능에 대해 설명합니다. Amazon에서 EMR 실행되는 Amazon EC2 및 Amazon EMR 6.15.0 릴리스에 대한 일반적인 자세한 내용은 Amazon EMR 릴리스 가이드의 Amazon EMR 6.15.0을 참조하세요.

Amazon EMR on EKS 6.15 릴리스

다음 Amazon EMR 6.15.0 릴리스는 Amazon EMR on에서 사용할 수 있습니다EKS. 특정 emr-6.15.0-XXXX 릴리스를 선택하여 관련 컨테이너 이미지 태그와 같은 자세한 내용을 봅니다.

Flink releases

다음 Amazon EMR 6.15.0 릴리스는 Flink 애플리케이션을 실행할 EKS 때 Amazon EMR에서 사용할 수 있습니다.

Spark releases

다음 Amazon EMR 6.15.0 릴리스는 Spark 애플리케이션을 실행할 EKS 때 Amazon EMR on에 사용할 수 있습니다.

  • emr-6.15.0-latest

  • emr-6.15.0-20231109

  • emr-6.15.0-spark-rapids-latest

  • emr-6.15.0-spark-rapids-20231109

  • emr-6.15.0-java11-latest

  • emr-6.15.0-java11-20231109

  • emr-6.15.0-java17-latest

  • emr-6.15.0-java17-20231109

  • emr-6.15.0-java17-al2023-latest

  • emr-6.15.0-java17-al2023-20231109

  • emr-6.15.0-spark-rapids-java17-latest

  • emr-6.15.0-spark-rapids-java17-20231109

  • emr-6.15.0-spark-rapids-java17-al2023-latest

  • emr-6.15.0-spark-rapids-java17-al2023-20231109

  • notebook-spark/emr-6.15.0-latest

  • notebook-spark/emr-6.15.0-20231109

  • notebook-spark/emr-6.15.0-spark-rapids-latest

  • notebook-spark/emr-6.15.0-spark-rapids-20231109

  • notebook-spark/emr-6.15.0-java11-latest

  • notebook-spark/emr-6.15.0-java11-20231109

  • notebook-spark/emr-6.15.0-java17-latest

  • notebook-spark/emr-6.15.0-java17-20231109

  • notebook-spark/emr-6.15.0-java17-al2023-latest

  • notebook-spark/emr-6.15.0-java17-al2023-20231109

  • notebook-python/emr-6.15.0-latest

  • notebook-python/emr-6.15.0-20231109

  • notebook-python/emr-6.15.0-spark-rapids-latest

  • notebook-python/emr-6.15.0-spark-rapids-20231109

  • notebook-python/emr-6.15.0-java11-latest

  • notebook-python/emr-6.15.0-java11-20231109

  • notebook-python/emr-6.15.0-java17-latest

  • notebook-python/emr-6.15.0-java17-20231109

  • notebook-python/emr-6.15.0-java17-al2023-latest

  • notebook-python/emr-6.15.0-java17-al2023-20231109

릴리스 정보

Amazon EMR on EKS 6.15.0 릴리스 정보

  • 지원되는 애플리케이션 ‐ AWS SDK for Java 1.12.569, Apache Spark 3.4.1-amzn-2, Apache Flink 1.17.1-amzn-1, Apache Hudi 0.14.0-amzn-0, Apache Iceberg 1.4.0-amzn-0, Delta 2.4.0, Apache Spark RAPIDS 23.08.01-amzn-0, Jupyter Enterprise Gateway 2.6.0

  • 지원되는 구성 요소 ‐ aws-sagemaker-spark-sdk, emr-ddb, emr-goodies, emr-s3-select, emrfs, hadoop-client, hudi, hudi-spark, iceberg, spark-kubernetes.

  • 지원되는 구성 분류

    StartJobRun 및 CreateManagedEndpoint와 함께 사용하는 경우APIs:

    분류 설명

    core-site

    Hadoop의 core-site.xml 파일에서 값을 변경합니다.

    emrfs-site

    EMRFS 설정을 변경합니다.

    spark-metrics

    Spark의 metrics.properties 파일에서 값을 변경합니다.

    spark-defaults

    Spark의 spark-defaults.conf 파일에서 값을 변경합니다.

    spark-env

    the Spark 환경의 값을 변경합니다.

    spark-hive-site

    Spark의 hive-site.xml 파일에서 값을 변경합니다.

    spark-log4j

    Spark의 log4j2.properties 파일에서 값을 변경합니다.

    emr-job-submitter

    작업 제출자 포드 구성.

    특히 CreateManagedEndpoint와 함께 사용하는 경우APIs:

    분류 설명

    jeg-config

    Jupyter Enterprise Gateway의 jupyter_enterprise_gateway_config.py 파일에서 값을 변경합니다.

    jupyter-kernel-overrides

    Jupyter 커널 사양 파일에서 커널 이미지 값을 변경합니다.

    구성 분류를 사용하면 애플리케이션을 사용자 지정할 수 있습니다. 이는와 같은 애플리케이션의 구성 XML 파일에 해당하는 경우가 많습니다spark-hive-site.xml. 자세한 내용은 애플리케이션 구성을 참조하세요.

주목할 만한 기능

다음 기능은의 Amazon 6.15 릴리스EMR에 포함되어 있습니다EKS.

  • Amazon EMR on EKS with Apache Flink - Amazon EMR on EKS 6.15.0을 사용하면 동일한 Amazon EKS 클러스터에서 다른 유형의 애플리케이션과 함께 Apache Flink 기반 애플리케이션을 실행할 수 있습니다. 이를 통해 리소스 활용도를 높이고 인프라 관리를 간소화할 수 있습니다. Amazon를 사용하여 정상적인 서비스 해제를 통해 Flink 애플리케이션에서 스팟 인스턴스를 활용하고 세분화된 복구 및 태스크 로컬 복구를 통해 더 빠른 재시작 시간을 달성할 수 있습니다EBS. 접근성 및 모니터링 기능에는 Amazon S3에 저장된 jar로 Flink 애플리케이션을 시작하는 기능, AWS Glue Data Catalog에 대한 액세스, Amazon S3 및 Amazon과의 통합 모니터링 CloudWatch, 컨테이너 로그 교체가 포함됩니다.