EMR Serverless 6.9.0 - Amazon EMR

EMR Serverless 6.9.0

다음 표에는 EMR Serverless 6.9.0에서 사용할 수 있는 애플리케이션 버전이 나와 있습니다.

애플리케이션 버전
Apache Spark 3.3.0
Apache Hive 3.1.3
Apache Tez 0.10.2
EMR Serverless 6.9.0 릴리스 정보

  • Apache Spark용 Amazon Redshift 통합은 Amazon EMR 릴리스 6.9.0 이상에 포함되어 있습니다. 이전의 오픈 소스 도구였던, 이 기본 통합은 Spark 커넥터로, Amazon Redshift와 Amazon Redshift Serverless에서 데이터를 읽고 쓰는 Apache Spark 애플리케이션을 빌드할 수 있습니다. 자세한 내용은 Amazon EMR Serverless에서 Apache Spark용 Amazon Redshift 통합 사용 단원을 참조하십시오.

  • EMR Serverless 릴리스 6.9.0에서 AWS Graviton2(arm64) 아키텍처에 대한 지원을 추가합니다. create-application 및 update-application API의 architecture 파라미터를 사용하여 arm64 아키텍처를 선택할 수 있습니다. 자세한 내용은 Amazon EMR Serverless 아키텍처 옵션 단원을 참조하십시오.

  • 이제 EMR Serverless Spark 및 Hive 애플리케이션에서 직접 Amazon DynamoDB 테이블을 내보내고, 가져오며, 쿼리하고, 조인할 수 있습니다. 자세한 내용은 Amazon EMR Serverless를 사용하여 DynamoDB에 연결 단원을 참조하십시오.

알려진 문제

  • Apache Spark용 Amazon Redshift 통합을 사용하고 Parquet 형식의 time, timetz, timestamp 또는 timestamptz(마이크로초 정밀도)를 사용하는 경우 커넥터는 시간 값을 가장 가까운 밀리초 값으로 반올림합니다. 해결 방법으로 텍스트 언로드 형식 unload_s3_format 파라미터를 사용합니다.