Amazon Managed Streaming for Apache Kafka (MSK) 和 Application Auto Scaling - Application Auto Scaling

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

Amazon Managed Streaming for Apache Kafka (MSK) 和 Application Auto Scaling

您可以使用目標追蹤擴展政策來擴展 Amazon MSK 叢集儲存。透過目標追蹤政策進行縮減的功能已停用。

使用下列資訊協助您將 Amazon MSK 與 Application Auto Scaling 整合。

為 Amazon MSK 建立的服務連結角色

使 Application Auto Scaling caling 將 Amazon MSK 資源註冊為可擴展目標 AWS 帳戶 時,會在您的中自動建立下列服務連結角色。此角色可讓 Application Auto Scaling 在您的帳戶內執行支援的操作。如需詳細資訊,請參閱 Application Auto Scaling 的服務連結角色

  • AWSServiceRoleForApplicationAutoScaling_KafkaCluster

服務連結角色所使用的服務委託人

上一節中的服務連結角色,只能由依據角色定義的信任關係所授權的服務委託人來擔任。Application Auto Scaling 使用的服務連結角色會將存取權授予下列服務委託人:

  • kafka.application-autoscaling.amazonaws.com

向 Application Auto Scaling 將 Amazon MSK 叢集儲存註冊為可擴展的目標

Application Auto Scaling 需要先有可擴展的目標,您才能為 Amazon MSK 叢集的每一代理程式的儲存磁碟區大小建立擴展政策。可擴展的目標是指 Application Auto Scaling 可擴展或縮減的資源。可擴展的目標是由資源 ID、可擴展的維度和命名空間的組合來唯一識別。

如果您使用 Amazon MSK 主控台設定自動擴展,則 Amazon MSK 會自動為您註冊可擴展的目標。

如果您想要使用 AWS CLI 或其中一個 AWS SDK 來設定 auto 調整規模,可以使用下列選項:

  • AWS CLI:

    呼叫 register-scalable-target 命令來註冊 Amazon MSK 叢集。以下範例會為 Amazon MSK 叢集註冊每一代理程式的儲存磁碟區大小,容量下限為 100 GiB,容量上限為 800 GiB。

    aws application-autoscaling register-scalable-target \ --service-namespace kafka \ --scalable-dimension kafka:broker-storage:VolumeSize \ --resource-id arn:aws:kafka:us-east-1:123456789012:cluster/demo-cluster-1/6357e0b2-0e6a-4b86-a0b4-70df934c2e31-5 \ --min-capacity 100 \ --max-capacity 800

    如果成功,此命令會傳回可擴展目標的 ARN。

    { "ScalableTargetARN": "arn:aws:application-autoscaling:region:account-id:scalable-target/1234abcd56ab78cd901ef1234567890ab123" }
  • AWS 開發套件:

    呼叫 RegisterScalableTarget 操作並提供 ResourceIdScalableDimensionServiceNamespaceMinCapacityMaxCapacity 作為參數。

注意

當 Amazon MSK 叢集是可擴展的目標時,縮減會停用且無法啟用。

如果您剛開始使用應用程式 Auto Scaling,可以在下列文件中找到有關擴展 Amazon MSK 資源的其他實用資訊:

適用於 Apache Kafka 開發人員指南的 Amazon 受管串流中的自動擴展