本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
亚马逊 EMR 7.4.0-Hadoop 发行说明
亚马逊 EMR 7.4.0-Hadoop 变更
类型 | 描述 |
---|---|
升级 |
Hadoop 版本已升级到 3.4.0,请参阅 OSS |
错误修复 |
修复待处理和已分配的 Yarn 指标的负数 FairScheduler |
错误修复 |
YARN-11702 |
错误修复 |
在缩小节点规模时改进竞赛条件处理 |
改进 |
HADOOP-18679 |
改进 |
HADOOP-19203 |
改进 |
HADOOP-19205 |
改进 |
HADOOP-19161 |
改进 |
HADOOP-19072 |
亚马逊 EMR 7.4.0-Hadoop 功能
有关亚马逊 EMR 7.4.0 中的 Hadoop 全新 Hadoop 功能,请参阅以下列表。
-
已对默认配置值进行了微调,以实现最佳性能:
mapreduce.input.fileinputformat.list-status.num-threads=10 — 这高于 1。
fs.s3a.block.size =64M — 这高于 32M。
fs.s3a.multipart.size =128M — 这比6400万有所增加。
Out-of-the-box 性能增强优化,用于加速 S3A 文件系统的 MapReduce 作业。