Quota d'Amazon MSK

Jusqu'à 90 courtiers par compte. 30 courtiers par cluster de ZooKeeper modes. 60 courtiers par cluster de mode KraFT. Pour demander un quota plus élevé, rendez-vous dans le Centre de support de la AWS console et créez un dossier de support.

Un minimum de 1 Gio de stockage par agent.

Un maximum de 16 384 Gio de stockage par agent.

Un cluster qui utilise le Contrôle d'accès IAM peut avoir à un moment donné jusqu'à 3 000 connexions TCP par agent. Pour augmenter cette limite, vous pouvez ajuster la propriété listener.name.client_iam.max.connections ou la listener.name.client_iam_public.max.connections configuration à l'aide de l' AlterConfig API Kafka ou de l'kafka-configs.shoutil. Il est important de noter que l'augmentation de la valeur de l'une ou l'autre propriété peut entraîner une indisponibilité.

Limites relatives aux connexions TCP. Lorsque les rafales de débit de connexion sont activées, MSK autorise 100 connexions par seconde. L'exception est le type d'instance kafka.t3.small, qui est autorisé à 4 connexions par seconde avec les rafales de débit activées. Les clusters plus anciens pour lesquels les rafales de débit de connexion ne sont pas activées verront cette fonctionnalité automatiquement activée lorsque le cluster sera patché.

Pour gérer les tentatives en cas d'échec des connexions, vous pouvez définir le paramètre de configuration reconnect.backoff.ms côté client. Par exemple, si vous souhaitez qu'un client tente à nouveau de se connecter au bout d'une seconde, définissez la valeur reconnect.backoff.ms sur 1000. Pour plus d'informations, consultez reconnect.backoff.ms dans la documentation Apache Kafka.

Jusqu'à 100 configurations par compte. Pour demander un ajustement de quota, rendez-vous dans la console AWS Centre de support et créez une demande de support.

Un maximum de 50 révisions par configuration.

Pour mettre à jour la configuration ou la version Apache Kafka d'un cluster MSK, assurez-vous d'abord que le nombre de partitions par agent est inférieur aux limites décrites dans Dimensionnez correctement votre cluster : nombre de partitions par agent.

Un maximum de 15 réplicateurs MSK par compte.

MSK Replicator ne réplique que 750 sujets par ordre trié. Si vous devez répliquer d'autres rubriques, nous vous recommandons de créer un réplicateur distinct. Accédez au centre de support de la AWS console et créez un dossier de support si vous avez besoin d'assistance pour plus de 750 sujets par réplicateur. Vous pouvez contrôler le nombre de sujets répliqués à l'aide de la métrique « TopicCount ».

Un débit d'entrée maximal de 1 Go par seconde par réplicateur MSK. Pour demander un quota plus élevé, rendez-vous dans le Centre de support de la AWS console et créez un dossier de support.

Taille d'enregistrement du réplicateur MSK : taille d'enregistrement maximale de 10 Mo (message.max.bytes). Pour demander un quota plus élevé, rendez-vous dans le Centre de support de la AWS console et créez un dossier de support.

Jusqu'à 100 plug-ins personnalisés.

Jusqu'à 100 configurations de worker.

Jusqu'à 60 workers de Connect. Si un connecteur est configuré pour avoir une capacité automatiquement mise à l'échelle, le nombre maximum de workers pour lequel le connecteur est configuré est le nombre utilisé par MSK Connect pour calculer le quota du compte.

Jusqu'à 10 workers par connecteur.