Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Vous avez Compte AWS des quotas par défaut pour Amazon MSK. Sauf indication contraire, chaque quota par compte est spécifique à votre région. Compte AWS
Demande d'augmentation de quota dans Amazon MSK
Vous pouvez demander une augmentation de quota pour chaque région à l'aide de la console Service Quotas ou d'un dossier d'assistance. AWS CLI Si aucun quota ajustable n'est disponible dans la console Service Quotas, utilisez le AWS Support Center Console pour créer un cas d'augmentation du quota de service
Support peut approuver, refuser ou approuver partiellement vos demandes d'augmentation de quota. Les augmentations ne sont pas accordées immédiatement et peuvent prendre quelques jours pour entrer en vigueur.
Pour demander une augmentation à l’aide de la console Service Quotas
-
Ouvrez la console Service Quotas sur https://console.aws.amazon.com/servicequotas/
. -
Dans la barre de navigation, en haut de l'écran, sélectionnez une région.
-
Dans le panneau de navigation de gauche, choisissez Services AWS.
-
Dans le champ Rechercher des services, tapez
msk, puis choisissez Amazon Managed Streaming for Apache Kafka (MSK). -
Dans Quotas de service, choisissez le nom du quota pour lequel vous souhaitez demander une augmentation. Par exemple,
Number of brokers per account. -
Choisissez Demander une augmentation au niveau du compte.
-
Pour Augmenter la valeur du quota, entrez une nouvelle valeur de quota.
-
Choisissez Request (Demander).
-
(Facultatif) Pour afficher les demandes en attente ou récemment résolues dans la console, choisissez Dashboard dans le volet de navigation de gauche. Pour les demandes en attente, choisissez l’état de la demande pour ouvrir le reçu de la demande. L’état initial d’une demande est Pending (En attente). Une fois que le statut est passé au quota demandé, le numéro de dossier s'affichera auprès du Support. Choisissez le numéro de dossier pour ouvrir le billet pour votre demande.
Pour plus d'informations, notamment sur la manière d'utiliser AWS CLI ou de SDKs demander une augmentation de quota, consultez la section Demander une augmentation de quota dans le Guide de l'utilisateur du Service Quotas.
Quota de courtiers Amazon MSK Standard
| Dimension | Quota | Remarques |
|---|---|---|
| Courtiers par compte | 90 | Pour demander un quota plus élevé, accédez à la console Service Quotas |
| Courtiers par cluster | 30 pour les clusters ZooKeeper basés 60 pour les clusters KRaft basés | Pour demander un quota plus élevé, accédez à la console Service Quotas |
| Stockage minimum par courtier | 1 Gio | |
| Stockage maximal par courtier | 16384 GiB | |
| Nombre maximal de connexions TCP par courtier (contrôle d'accès IAM) | 3000 | Pour augmenter cette limite, vous pouvez ajuster la propriété listener.name.client_iam.max.connections ou la listener.name.client_iam_public.max.connections configuration à l'aide de l'AlterConfigAPI Kafka ou de l'kafka-configs.shoutil. Il est important de noter que l'augmentation de la valeur de l'une ou l'autre propriété peut entraîner une indisponibilité. |
| Taux de connexions TCP maximal par courtier (IAM) | 100 par seconde (tailles d'instance M5 et M7g) 4 par seconde (taille d'instance t3) | Pour gérer les tentatives en cas d'échec des connexions, vous pouvez définir le paramètre de configuration reconnect.backoff.ms côté client. Par exemple, si vous souhaitez qu'un client tente à nouveau de se connecter au bout d'une seconde, définissez surreconnect.backoff.ms. 1000 Pour plus d'informations, consultez reconnect.backoff.ms |
| Nombre maximal de connexions TCP par courtier (non IAM) | N/A | MSK n'impose pas de limites de connexion pour l'authentification non IAM. Vous devez surveiller d'autres indicateurs tels que l'utilisation du processeur et de la mémoire pour vous assurer de ne pas surcharger votre cluster en raison de connexions excessives. |
| Configurations par compte | 100 | Pour demander un quota plus élevé, accédez à la console Service Quotas Pour mettre à jour la configuration ou la version Apache Kafka d'un cluster MSK, assurez-vous d'abord que le nombre de partitions par agent est inférieur aux limites décrites dans Dimensionnez correctement votre cluster : nombre de partitions par courtier standard. |
| Révisions de configuration par compte | 50 |
Quota de courtiers Amazon MSK Express
| Dimension | Quota | Remarques |
|---|---|---|
| Courtiers par compte | 90 | Pour demander un quota plus élevé, accédez à la console Service Quotas |
| Courtiers par cluster | 30 | Pour demander un quota plus élevé, accédez à la console Service Quotas |
| Stockage maximum | Illimité | |
| Nombre maximal de connexions TCP par courtier (contrôle d'accès IAM) | 3000 | |
| Taux de connexions TCP maximal par courtier (IAM) | 100 par seconde | Pour gérer les tentatives en cas d'échec des connexions, vous pouvez définir le paramètre de configuration reconnect.backoff.ms côté client. Par exemple, si vous souhaitez qu'un client tente à nouveau de se connecter au bout d'une seconde, définissez surreconnect.backoff.ms. 1000 Pour plus d'informations, consultez reconnect.backoff.ms |
| Nombre maximal de connexions TCP par courtier (non IAM) | N/A | MSK n'impose pas de limites de connexion pour l'authentification non IAM. Vous devez toutefois surveiller d'autres indicateurs tels que l'utilisation du processeur et de la mémoire pour vous assurer de ne pas surcharger votre cluster en raison de connexions excessives. |
| Configurations par compte | 100 | Pour demander un quota plus élevé, accédez à la console Service Quotas |
| Révisions de configuration par compte | 50 | |
| Nombre maximum d'entrées par courtier | Recommandé : 15,6 - 500,0 MBps | En fonction de la taille de l'instance. |
| Sortie maximale par courtier | Recommandé : 31,2 - 1000,0 MBps | En fonction de la taille de l'instance. |
Limites de débit des courtiers express en fonction de la taille du courtier
Le tableau suivant répertorie les limites de débit recommandées et maximales liées à l'entrée et à la sortie pour différentes tailles de courtier. Dans ce tableau, le débit recommandé est représenté par des performances soutenues, c'est-à-dire le seuil jusqu'auquel vos applications ne subiront aucune dégradation des performances. Si vous dépassez ces limites sur l'une ou l'autre dimension, vous pouvez obtenir un débit accru, mais vous risquez également de constater une dégradation des performances. Le quota maximum est le seuil à partir duquel votre cluster limitera le trafic de lecture/écriture. Vos applications ne pourront pas fonctionner au-delà de ce seuil.
| Taille d’instance | Performances soutenues (MBps) pour l'entrée | Quota maximum (MBps) pour l'entrée | Performances soutenues (MBps) pour l'évacuation | Quota maximal (MBps) pour la sortie |
|---|---|---|---|---|
| express.m7g.large | 15,6 | 23,4 | 31,2 | 58,5 |
| express.m7g.xlarge | 31,2 | 46,8 | 62,5 | 117 |
| express.m7g.2xlarge | 62,5 | 93,7 | 125 | 234,2 |
| express.m7g.4xlarge | 124,9 | 187,5 | 249,8 | 468,7 |
| express.m7g.8xlarge | 250 | 375 | 500 | 937,5 |
| express.m7g. 12 x large | 375 | 562,5 | 750 | 1406,2 |
| express.m7g.16xlarge | 500 | 750 | 1 000 | 1875 |
Quotas du réplicateur MSK
Un maximum de 15 réplicateurs MSK par compte.
-
MSK Replicator ne réplique que 750 sujets par ordre trié. Si vous devez répliquer d'autres rubriques, nous vous recommandons de créer un réplicateur distinct. Accédez à la console Service Quotas
si vous avez besoin d'assistance pour plus de 750 sujets par réplicateur. Vous pouvez contrôler le nombre de sujets répliqués à l'aide de la métrique « TopicCount ». -
Un débit d'entrée maximal de 1 Go par seconde par réplicateur MSK. Demandez un quota plus élevé en passant par la console Service Quotas
. -
Taille d'enregistrement du réplicateur MSK : taille d'enregistrement maximale de 10 Mo (message.max.bytes). Demandez un quota plus élevé en passant par la console Service Quotas
.
Quota de MSK sans serveur
Les quotas spécifiés dans le tableau suivant sont par cluster, sauf indication contraire.
Note
Si vous rencontrez un problème avec les limites de quota de service, créez un dossier d'assistance avec votre cas d'utilisation et la limite demandée.
| Dimension | Quota | Résultat de violation de quota |
|---|---|---|
|
Débit d'entrée maximal |
200 MBps |
Ralentissement avec durée de limitation en réponse |
| Débit de sortie maximal | 400 MBps |
Ralentissement avec durée de limitation en réponse |
| Durée de conservation maximale | Illimité | N/A |
|
Nombre maximal de connexions client |
3000 | Fermeture de connexion |
| Nombre maximal de tentatives de connexion | 100 par seconde | Fermeture de connexion |
|
Taille maximale du message |
8 Mio | La requête échoue avec ErrorCode : INVALID_REQUEST |
| Taux maximal de demandes | 15 000 par seconde | Ralentissement avec durée de limitation en réponse |
|
Taux maximal de APIs demandes de gestion de sujets |
2 par seconde | Ralentissement avec durée de limitation en réponse |
|
Nombre maximal d'octets à récupérer par demande |
55 Mo |
La requête échoue avec ErrorCode : INVALID_REQUEST |
|
Nombre maximal de groupes de consommateurs |
500 | JoinGroup la demande échoue |
| Nombre maximum de partitions (leaders) | 2 400 pour les rubriques non compactées. 120 pour les rubriques compactées. Pour demander un ajustement du quota de service, créez un dossier d'assistance avec votre cas d'utilisation et la limite demandée. | La requête échoue avec ErrorCode : INVALID_REQUEST |
| Taux maximal de création et de suppression de partitions | 250 en 5 minutes | La requête échoue avec ErrorCode : THROUGHPUT_QUOTA_EXCEDED |
|
Débit d'entrée maximal par partition |
5 MBps | Ralentissement avec durée de limitation en réponse |
|
Débit de sortie maximal par partition |
10 MBps | Ralentissement avec durée de limitation en réponse |
|
Taille maximale de partition (pour les rubriques compactées) |
250 Go | La requête échoue avec ErrorCode : THROUGHPUT_QUOTA_EXCEDED |
| Nombre maximum de clients VPCs par cluster sans serveur | 5 | |
| Nombre maximal de clusters sans serveur par compte | 10. Pour demander un ajustement du quota de service, créez un dossier d'assistance avec votre cas d'utilisation et la limite demandée. |
Quota de MSK Connect
Jusqu'à 100 plug-ins personnalisés.
-
Jusqu'à 100 configurations de worker.
-
Jusqu'à 60 workers de Connect. Si un connecteur est configuré pour avoir une capacité automatiquement mise à l'échelle, le nombre maximum de workers pour lequel le connecteur est configuré est le nombre utilisé par MSK Connect pour calculer le quota du compte.
-
Jusqu'à 10 workers par connecteur.
Pour demander un quota plus élevé pour MSK Connect, accédez à la console Service Quotas.
