Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Lorsque vous choisissez Amazon MSK pour envoyer des informations à un flux Firehose, vous pouvez choisir entre des clusters provisionnés par MSK et des clusters sans serveur MSK. Vous pouvez ensuite utiliser Firehose pour lire facilement les données d'un cluster et d'un sujet Amazon MSK spécifiques et les charger dans la destination S3 spécifiée.
Dans la section Paramètres source de la page, indiquez des valeurs pour les champs suivants.
- Connectivité du cluster Amazon MSK
-
Choisissez l'option Brokers d'amorçage privés (recommandé) ou Brokers d'amorçage publics en fonction de la configuration de votre cluster. Les brokers d'amorçage sont ce que le client Apache Kafka utilise comme point de départ pour se connecter au cluster. Les courtiers bootstrap publics sont destinés à un accès public depuis l'extérieur AWS, tandis que les courtiers bootstrap privés sont destinés à un accès depuis l'intérieur. AWS Pour plus d'informations sur Amazon MSK, consultez Amazon Managed Streaming for Apache Kafka.
Pour se connecter à un cluster Amazon MSK provisionné ou sans serveur via des brokers d'amorçage privés, le cluster doit répondre à toutes les exigences suivantes.
-
Le cluster doit être actif.
-
Le cluster doit avoir IAM comme l'une de ses méthodes de contrôle d'accès.
-
La connectivité privée multi-VPC doit être activée pour la méthode de contrôle d'accès IAM.
-
Vous devez ajouter à ce cluster une politique basée sur les ressources qui accorde au principal du service Firehose l'autorisation d'appeler l'opération d'API Amazon MSK.
CreateVpcConnection
Pour se connecter à un cluster Amazon MSK provisionné via des brokers d'amorçage publics, le cluster doit répondre à toutes les exigences suivantes.
-
Le cluster doit être actif.
-
Le cluster doit avoir IAM comme l'une de ses méthodes de contrôle d'accès.
-
Le cluster doit être accessible au public.
-
- Compte de cluster MSK
-
Vous pouvez choisir le compte sur lequel réside le cluster Amazon MSK. Il peut s'agir de l'une des options suivantes.
-
Compte courant : vous permet d'ingérer les données d'un cluster MSK dans le compte courant AWS . Pour cela, vous devez spécifier l'ARN du cluster Amazon MSK à partir duquel votre flux Firehose lira les données.
-
Multi-comptes : vous permet d'ingérer les données d'un cluster MSK dans un autre compte. AWS Pour de plus amples informations, veuillez consulter Livraison entre comptes depuis Amazon MSK.
-
- Rubrique
-
Spécifiez le sujet Apache Kafka à partir duquel vous souhaitez que votre flux Firehose ingère des données. Vous ne pouvez pas mettre à jour cette rubrique une fois la création du stream Firehose terminée.
Note
Firehose décompresse automatiquement les messages d'Apache Kafka.