选择您的 Cookie 首选项

我们使用必要 Cookie 和类似工具提供我们的网站和服务。我们使用性能 Cookie 收集匿名统计数据,以便我们可以了解客户如何使用我们的网站并进行改进。必要 Cookie 无法停用,但您可以单击“自定义”或“拒绝”来拒绝性能 Cookie。

如果您同意,AWS 和经批准的第三方还将使用 Cookie 提供有用的网站功能、记住您的首选项并显示相关内容,包括相关广告。要接受或拒绝所有非必要 Cookie,请单击“接受”或“拒绝”。要做出更详细的选择,请单击“自定义”。

Hudi 配置最佳实践

聚焦模式
Hudi 配置最佳实践 - Managed Service for Apache Flink

Amazon Managed Service for Apache Flink 之前称为 Amazon Kinesis Data Analytics for Apache Flink。

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

Amazon Managed Service for Apache Flink 之前称为 Amazon Kinesis Data Analytics for Apache Flink。

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

要在适用于 Apache Flink 的托管服务上运行 Hudi 连接器,我们建议进行以下配置更改。

禁用了 hoodie.embed.timeline.server

Flink 上的 Hudi 连接器在 Flink 作业管理器 (JM) 上设置了一个嵌入式时间轴 (TM) 服务器,用于缓存元数据,从而在作业并行度较高时提高性能。我们建议您在适用于 Apache Flink 的托管服务上禁用此嵌入式服务器,因为我们禁用 JM 和 TM 之间的非 Flink 通信。

如果启用此服务器,Hudi 写入操作将首先尝试连接到 JM 上的嵌入式服务器,然后回退到从 Amazon S3 读取元数据。这意味着 Hudi 会导致连接超时,从而延迟 Hudi 的写入并对 Apache Flink 的托管服务造成性能影响。

隐私网站条款Cookie 首选项
© 2025, Amazon Web Services, Inc. 或其附属公司。保留所有权利。