亚马逊MSK快递经纪商 - Amazon Managed Streaming for Apache Kafka

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

亚马逊MSK快递经纪商

Provisione MSK d 的 Express 代理使 Apache Kafka 更易于管理,大规模运行更具成本效益,并且在您期望的低延迟下更具弹性。代理包括可自动扩展的 pay-as-you-go存储,无需调整规模、配置或主动监控。根据所选的实例大小,与标准 Apache Kafka 代理相比,每个代理节点可以为每个代理提供高达 3 倍的吞吐量,扩展速度提高到 20 倍,恢复速度快 90%。Express 代理预先配置MSK了亚马逊的最佳实践默认值,并强制执行客户吞吐量配额,以最大限度地减少客户与 Kafka 后台操作之间的资源争用。

以下是使用Express经纪人时需要考虑的一些关键因素和功能。

  • 无需存储管理:Express Brokers 无需配置或管理任何存储资源。您可以获得弹性、几乎无限量且完全托管的存储。 pay-as-you-go对于高吞吐量用例,您无需考虑计算实例和存储卷之间的交互以及相关的吞吐量瓶颈。这些功能简化了群集管理并消除了存储管理的操作开销。

  • 扩展速度更快:Express 代理允许您扩展集群,移动分区的速度比标准代理快 20 倍。当您需要扩展集群以应对即将到来的负载峰值或在集群中进行扩展以降低成本时,此功能至关重要。有关扩展集群的更多详细信息,请参阅扩展集群移除代理、重新分配分区和设置 LinkedIn Cruise Control 进行再平衡的部分。

  • 更高的吞吐量:Express 经纪商为每个经纪商提供的吞吐量是标准经纪商的三倍。例如,对于每个 m7g.16xlarge 大小 Express 代理,您可以安全地以高达 500 MBps 的速度写入数据,而同等标准代理MBps上的数据写入速度为 153.8(这两个数字都假设为后台操作(例如复制和重新平衡)分配了足够的带宽)。

  • 针对高弹性进行了配置:Express brokers 会自动提供各种最佳实践,以提高集群的弹性。其中包括关键 Apache Kafka 配置的防护栏、吞吐量配额以及后台操作和计划外维修的容量预留。这些功能可以更安全、更轻松地运行大规模 Apache Kafka 应用程序。有关更多详细信息快递经纪人配置亚马逊MSK快递经纪商配额请参阅和部分。

  • 没有维护窗口:Express 经纪人没有维护窗口。Amazon MSK 会自动持续更新您的集群硬件。有关更多详细信息,请参阅为 Express 经纪人打补丁

有关快递经纪人的其他信息

  • 快递经纪人与 Apache Kafka APIs 合作。

  • 快递经纪商仅在 3 种AZs配置中可用。

  • Express 代理仅适用于特定实例大小。有关更新的列表,请参阅 Amazon MSK 定价

  • Apache Kafka 版本 3.6 支持快递代理。