本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
亚马逊 EMR 7.6.0-Hadoop 发行说明
亚马逊 EMR 7.6.0-Hadoop 变更
类型 | 描述 |
---|---|
新功能 |
S3A 凭证自动售货架构 |
新功能 |
S3A Magic Committer 对 Hive 的支持 |
逆向移植 |
HADOOP-19309:S3A |
逆向移植 |
HADOOP-19050 |
逆向移植 |
HADOOP-18708 |
亚马逊 EMR 7.6.0-Hadoop 功能
-
yarn.scheduler.increment-allocation-mb
和的默认配置设置yarn.scheduler.minimum-allocation-mb
已从 32 修改为 1,这实际上禁用了 YARN 中的容器资源标准化。 Hadoop 中的 S3A 文件系统已得到增强,可支持请求级凭证自动售卖。借助此功能,发出的每个 Amazon S3 请求都将使用
AwsCredentialsProvider
. 这通过为每个请求动态提供凭证来确保提高灵活性和安全性。Hadoop 中的 S3A 文件系统支持 S3 客户端加密。