EMR Serverless 6.9.0 - Amazon EMR

EMR Serverless 6.9.0

下表列出了 EMR Serverless 6.9.0 中可用的应用程序版本。

应用程序 版本
Apache Spark 3.3.0
Apache Hive 3.1.3
Apache Tez 0.10.2
EMR Serverless 6.9.0 发布说明

  • Amazon EMR 发行版 6.9.0 及更高版本包含适用于 Apache Spark 的 Amazon Redshift 集成。本地集成之前是一种开源工具，现在是 Spark 连接器，您可以将其用于构建 Apache Spark 应用程序，这些应用程序可在 Amazon Redshift 和 Amazon Redshift Serverless 中读取和写入数据。有关更多信息，请参阅 在 Amazon EMR Serverless 上使用适用于 Apache Spark 的 Amazon Redshift 集成。

  • EMR Serverless 发行版 6.9.0 增加了对 AWS Graviton2（arm64）架构的支持。您可以使用 create-application 和 update-application API 的 architecture 参数来选择 arm64 架构。有关更多信息，请参阅 Amazon EMR Serverless 架构选项。

  • 现在，您可以直接从 EMR Serverless Spark 和 Hive 应用程序导出、导入、查询和连接 Amazon DynamoDB 表。有关更多信息，请参阅 使用 Amazon EMR Serverless 连接到 DynamoDB。

已知问题

  • 如果您使用适用于 Apache Spark 的 Amazon Redshift 集成，并且具有 Parquet 格式的时间、timetz、时间戳或 timestamptz（精度为微秒），连接器会将时间值舍入为最接近的毫秒值。解决方法是使用文本卸载格式 unload_s3_format 参数。