其他考虑因素 - Amazon EMR

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

其他考虑因素

以下列表包含EMR无服务器的其他注意事项。

  • EMR无服务器在以下 AWS 区域版本中可用:

    • 美国东部(俄亥俄州)

    • 美国东部(弗吉尼亚州北部)

    • 美国西部(加利福尼亚北部)

    • 美国西部(俄勒冈州)

    • 非洲(开普敦)

    • 亚太地区(香港)

    • 亚太地区(雅加达)

    • 亚太地区(孟买)

    • 亚太地区(大阪)

    • 亚太地区(首尔)

    • 亚太地区(新加坡)

    • 亚太地区(悉尼)

    • 亚太地区(东京)

    • 加拿大(中部)

    • 欧洲地区(法兰克福)

    • 欧洲地区(爱尔兰)

    • 欧洲地区(伦敦)

    • 欧洲地区(米兰)

    • 欧洲地区(巴黎)

    • 欧洲(西班牙)

    • 欧洲(斯德哥尔摩)

    • 中东(巴林)

    • 中东 (UAE)

    • 南美洲(圣保罗)

    • AWS GovCloud (美国东部)

    • AWS GovCloud (美国西部)

    有关与这些区域关联的端点列表,请参阅 服务端点

  • 作业运行的默认超时为 12 小时。您可以使用startJobRunAPI或中的executionTimeoutMinutes属性更改此设置 AWS SDK。如果希望作业运行永不超时,可将 executionTimeoutMinutes 设置为 0。例如,有一个流处理应用程序,将 executionTimeoutMinutes 设置为 0,以允许流处理作业持续运行。

  • 中的billedResourceUtilization属性getJobRunAPI显示了为作业运行计费的 AWS 聚合 v CPU、内存和存储空间。计费资源包括工作线程的 1 分钟最低使用量,以及每个工作线程超过 20GB 的额外存储空间。这些资源不包括空闲预初始化工作线程的使用情况。

  • 如果没有VPC连接,作业可以访问同一 AWS 服务 端点中的某些端点 AWS 区域。这些服务包括 Amazon S3、 AWS Glu AWS e、Lake Formation、Amazon CloudWatch Logs AWS KMS AWS Security Token Service Amazon DynamoDB、、、和 AWS Secrets Manager。您可以启用VPC连接以 AWS 服务 通过其他方式访问其他人 AWS PrivateLink,但您无需这样做。要访问外部服务,您可以使用创建应用程序VPC。

  • EMR无服务器不支持HDFS。工作线程上的本地磁盘是临时存储,EMRServerless 在作业运行期间使用它来清理和处理数据。

  • EMR无服务器不支持现有emr-dynamodb-connector的。