Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Surveiller les EMR événements Amazon avec CloudWatch
Amazon EMR suit les événements et conserve les informations les concernant pendant sept jours maximum dans la EMR console Amazon. Amazon EMR enregistre les événements en cas de modification de l'état des clusters, des groupes d'instances, des flottes d'instances, des politiques de dimensionnement automatique ou des étapes. Les événements enregistrent la date et l'heure auxquelles l'événement s'est produit, des détails sur les éléments concernés et d'autres points de données critiques.
Le tableau suivant répertorie les EMR événements Amazon, ainsi que l'état ou le changement d'état qu'ils indiquent, la gravité de l'événement, le type d'événement, le code de l'événement et les messages relatifs aux événements. Amazon EMR représente les événements sous forme JSON d'objets et les envoie automatiquement vers un flux d'événements. L'JSONobjet est important lorsque vous définissez des règles pour le traitement des événements à l'aide d' CloudWatch événements, car les règles visent à correspondre aux modèles de l'JSONobjet. Pour plus d'informations, consultez les sections Événements et modèles d'événements et EMRÉvénements Amazon dans le guide de l'utilisateur Amazon CloudWatch Events.
Note
Pour nous assurer de vous fournir les informations les plus pertinentes, nous affinons continuellement nos messages d'erreur. Pour cette raison, nous vous recommandons de ne pas analyser le texte des messages pour lancer les actions suivantes dans votre flux de travail.
Événements de démarrage de clusters
État ou changement d'état | Sévérité | Type d’événement | Code de l'événement | Message |
---|---|---|---|---|
CREATING |
WARN |
EMRprovisionnement du parc d'instances | EC2provisionnement - Capacité d'instance insuffisante | Nous ne sommes pas en mesure de créer votre EMR cluster Amazon ClusterId
(ClusterName) pour le parc d'instances InstanceFleetID Amazon ne EC2 dispose pas d'une capacité ponctuelle suffisante pour le type d'instance [Instancetype1, Instancetype2] et d'une capacité à la demande insuffisante pour le type d'instance [Instancetype3,
Instancetype4] dans la zone de disponibilité[AvailabilityZone1,
AvaliabilityZone2] . Consultez la documentation ici pour plus d'informations sur la manière de réagir à cet événement. |
CREATING |
WARN |
EMRprovisionnement de groupes d'instances | EC2provisionnement - Capacité d'instance insuffisante | Nous ne sommes pas en mesure de créer votre EMR cluster Amazon ClusterId
(ClusterName) pour le groupe d'instances InstanceGroupID Amazon ne EC2 dispose pas d'une capacité ponctuelle suffisante pour le type d'instance [Instancetype1, Instancetype2] et d'une capacité à la demande insuffisante pour le type d'instance [Instancetype3,
Instancetype4] dans la zone de disponibilité[AvailabilityZone1,
AvaliabilityZone2] . Consultez la documentation ici pour plus d'informations sur la manière de réagir à cet événement. |
CREATING |
WARN |
EMRprovisionnement du parc d'instances | EC2provisionnement - Adresses libres insuffisantes dans le sous-réseau | Nous ne pouvons pas créer le EMR cluster Amazon ClusterId (ClusterName) que vous avez demandé pour le parc d'instances, InstanceFleetID car le sous-réseau spécifié [Subnet1, Subnet2] ne contient pas suffisamment d'adresses IP privées libres pour répondre à votre demande. Utilisez cette DescribeSubnets opération pour voir combien d'adresses IP sont disponibles (non utilisées) dans votre sous-réseau. Pour plus d'informations sur la manière de réagir à cet événement, consultez la section Codes d'erreur pour Amazon EC2 API |
CREATING |
WARN |
EMRprovisionnement de groupes d'instances | EC2provisionnement - Adresses libres insuffisantes dans le sous-réseau | Nous ne pouvons pas créer le EMR cluster Amazon ClusterId (ClusterName) que vous avez demandé pour le groupe d'instances InstanceGroupID car le sous-réseau spécifié [Subnet1, Subnet2] ne contient pas suffisamment d'adresses IP privées libres pour répondre à votre demande. Utilisez cette DescribeSubnets opération pour voir combien d'adresses IP sont disponibles (non utilisées) dans votre sous-réseau. Pour plus d'informations sur la manière de réagir à cet événement, consultez la section Codes d'erreur pour Amazon EC2 API |
CREATING
|
WARN
|
EMRprovisionnement du parc d'instances |
EC2Provisionnement — CPU Limite v dépassée |
La mise à disposition de InstanceFleetID dans le EMR cluster Amazon ClusterId (ClusterName) est retardée car vous avez atteint la limite du nombre vCPUs (unités de traitement virtuelles) attribuées aux instances en cours d'exécution dans votreaccount (accountId) . Pour plus d'informations, consultez Codes d'erreur pour Amazon EC2 API |
CREATING
|
WARN
|
EMRprovisionnement de groupes d'instances |
EC2Provisionnement — CPU Limite v dépassée |
La mise à disposition du groupe d'instances InstanceGroupID dans le EMR cluster Amazon ClusterId est retardée car vous avez atteint la limite du nombre vCPUs (unités de traitement virtuelles) attribuées aux instances en cours d'exécution dans votre compte(accountId) . Pour plus d'informations, consultez Codes d'erreur pour Amazon EC2 API |
CREATING
|
WARN
|
EMRprovisionnement du parc d'instances |
EC2Provisionnement — Dépassement de la limite du nombre d'instances Spot |
La mise à disposition du parc d'instances InstanceFleetID dans le EMR cluster Amazon ClusterID (ClusterName) est retardée car vous avez atteint la limite du nombre d'instances Spot que vous pouvez lancer dans votreaccount (accountId) . Pour plus d'informations, consultez la section Codes d'erreur pour Amazon EC2 API. |
CREATING
|
WARN
|
EMRprovisionnement de groupes d'instances |
EC2Provisionnement — Dépassement de la limite du nombre d'instances Spot |
La mise à disposition du groupe d'instances InstanceGroupID dans le EMR cluster Amazon ClusterID (ClusterName) est retardée car vous avez atteint la limite du nombre d'instances Spot que vous pouvez lancer dans votreaccount (accountId) . Pour plus d'informations, consultez la section Codes d'erreur pour Amazon EC2 API. |
CREATING
|
WARN
|
EMRprovisionnement du parc d'instances |
EC2Provisionnement : limite d'instances dépassée |
La mise à disposition du parc d'instances InstanceFleetID dans le EMR cluster Amazon ClusterId (ClusterName) est retardée car vous avez atteint la limite du nombre d'instances que vous pouvez exécuter simultanément dans votre account (accountID) cluster. Pour plus d'informations sur les limites EC2 de service Amazon, consultez la section Codes d'erreur pour Amazon EC2 API. |
CREATING
|
WARN
|
EMRprovisionnement de groupes d'instances |
EC2Provisionnement : limite d'instances dépassée |
La mise à disposition du groupe d'instances InstanceGroupID dans le EMR cluster Amazon ClusterId (ClusterName) est retardée car vous avez atteint la limite du nombre d'instances que vous pouvez exécuter simultanément dans votreaccount (accountID) . Pour plus d'informations sur les limites EC2 de service Amazon, consultez la section Codes d'erreur pour Amazon EC2 API. |
CREATING |
WARN |
EMRprovisionnement de groupes d'instances |
Aucun(e) |
Le EMR cluster Amazon - ou - Le EMR cluster Amazon NoteUn cluster à l'état |
STARTING
|
INFO
|
EMRmodification de l'état du cluster |
Aucun(e) |
Le EMR cluster Amazon |
STARTING
|
INFO
|
EMRmodification de l'état du cluster |
Aucun(e) |
NoteS'applique uniquement aux clusters avec la configuration des flottes d'instances et plusieurs zones de disponibilité sélectionnées au sein d'AmazonEC2.
|
STARTING
|
INFO
|
EMRmodification de l'état du cluster |
Aucun(e) |
Le EMR cluster Amazon |
WAITING
|
INFO
|
EMRmodification de l'état du cluster |
Aucun(e) |
Le EMR cluster Amazon - ou - Le EMR cluster Amazon NoteUn cluster à l'état |
Note
Les événements associés au code d'événement sont émis EC2 provisioning - Insufficient Instance
Capacity
régulièrement lorsque votre EMR cluster rencontre une erreur de capacité insuffisante de la part d'Amazon EC2 pour votre parc d'instances ou votre groupe d'instances lors de la création ou de l'opération de redimensionnement du cluster. Pour plus d'informations sur comment réagir à ces événements, consultez Réponse aux événements liés à une capacité d'instance insuffisante du EMR cluster Amazon.
Événements de terminaison d'un cluster
État ou changement d'état | Sévérité | Type d’événement | Code de l'événement | Message |
---|---|---|---|---|
TERMINATED
|
La gravité dépend de la raison du changement d'état, comme illustré dans les exemples suivants :
|
EMRmodification de l'état du cluster |
Aucun(e) |
Amazon EMR Cluster |
TERMINATED_WITH_ERRORS
|
CRITICAL
|
EMRmodification de l'état du cluster |
Aucun(e) |
Amazon EMR Cluster |
TERMINATED_WITH_ERRORS
|
CRITICAL
|
EMRmodification de l'état du cluster |
Aucun(e) |
Amazon EMR Cluster |
Événements de modification de l'état de la flotte d'instances
Note
La configuration des flottes d'instances n'est disponible que dans les EMR versions 4.8.0 et ultérieures d'Amazon, à l'exception des versions 5.0.0 et 5.0.3.
État ou changement d'état | Sévérité | Type d’événement | Code de l'événement | Message |
---|---|---|---|---|
De |
INFO
|
Aucun(e) | Le provisionnement du parc d'instances |
|
De |
INFO
|
Aucun(e) | Un redimensionnement de la flotte d'instances |
|
De |
INFO
|
Aucun(e) | L'opération de redimensionnement du parc d'instances |
|
De |
INFO
|
Aucun(e) | L'opération de redimensionnement de la flotte d'instances |
|
SUSPENDED
|
ERROR
|
Aucun(e) | Le parc |
|
RESIZING
|
WARNING
|
Aucun(e) | L'opération de redimensionnement du parc d'instances |
|
|
INFO
|
Aucun(e) | L'opération de redimensionnement de la flotte d'instances |
|
|
INFO
|
Aucun(e) | Une opération de redimensionnement de la flotte d'instances |
Événements de redimensionnement de la flotte d'instances
Type d’événement | Sévérité | Code de l'événement | Message |
---|---|---|---|
EMRredimensionnement du parc d'instances |
ERROR |
Délai d'expiration pour la mise en service Spot |
L'opération de redimensionnement du parc d'instances |
EMRredimensionnement du parc d'instances |
ERROR |
Délai d'expiration de la mise en service à la demande |
L'opération de redimensionnement du parc d'instances |
EMRredimensionnement du parc d'instances |
WARNING |
EC2provisionnement - Capacité d'instance insuffisante | Nous ne sommes pas en mesure de terminer l'opération de redimensionnement du parc d'instances |
EMRredimensionnement du parc d'instances |
WARNING |
Délai d'expiration de la mise en service Spot : Redimensionnement continu |
Nous sommes toujours en train de fournir de la capacité Spot pour l'opération de redimensionnement du parc d'instances qui a été lancée, par |
EMRredimensionnement du parc d'instances |
WARNING |
Délai d'expiration de la mise en service à la demande : Redimensionnement continu |
Nous sommes toujours en train de fournir de la capacité à la demande pour l'opération de redimensionnement du parc d'instances qui a été lancée, par |
EMRredimensionnement du parc d'instances |
WARNING |
EC2Provisionnement : adresse libre insuffisante dans le sous-réseau |
Nous ne pouvons pas terminer l'opération de redimensionnement du parc d'instances InstanceFleetID dans le EMR cluster Amazon ClusterId (ClusterName) car le sous-réseau spécifié [Subnet1, Subnet2] ne contient pas suffisamment d'adresses IP privées libres pour répondre à votre demande. Utilisez cette DescribeSubnets opération pour voir combien d'adresses IP sont disponibles (non utilisées) dans votre sous-réseau. Pour plus d'informations sur la manière de réagir à cet événement, consultez la section Codes d'erreur pour Amazon EC2 API. |
EMRredimensionnement du parc d'instances |
WARNING |
EC2Provisionnement - CPU Limite v dépassée |
Le redimensionnement du parc d'instances InstanceFleetID dans le EMR cluster Amazon ClusterName est retardé car vous avez atteint la limite du nombre vCPUs (unités de traitement virtuelles) attribuées aux instances en cours d'exécution dans votre account (accountId) cluster. Pour plus d'informations, consultez la section Codes d'erreur pour Amazon EC2 API. |
EMRredimensionnement du parc d'instances |
WARNING |
EC2Provisionnement : limite du nombre d'instances ponctuelles dépassée |
La mise à disposition du parc d'instances InstanceFleetID dans le EMR cluster Amazon ClusterID (ClusterName) est retardée car vous avez atteint la limite du nombre d'instances Spot que vous pouvez lancer dans votreaccount (accountId) . Pour plus d'informations, consultez la section Codes d'erreur pour Amazon EC2 API. |
EMRredimensionnement du parc d'instances |
WARNING |
EC2Provisionnement : limite d'instances dépassée |
La mise à disposition du parc d'instances InstanceFleetID dans le EMR cluster Amazon ClusterID (ClusterName) est retardée car vous avez atteint la limite du nombre d'instances à la demande que vous pouvez exécuter dans votreaccount (accountId) . Pour plus d'informations sur les codes d'erreur pour Amazon EC2 API. |
Note
Les événements liés au délai de mise en service sont émis lorsqu'Amazon EMR arrête de fournir de la capacité ponctuelle ou à la demande pour le parc après l'expiration du délai d'expiration. Pour plus d'informations sur comment réagir à ces événements, consultez Réponse aux événements de redimensionnement du parc d'instances du EMR cluster Amazon.
Événements de groupe d'instances
Type d’événement | Sévérité | Code de l'événement | Message |
---|---|---|---|
De |
INFO
|
Aucun(e) | L'opération de redimensionnement du groupe d'instances |
De |
INFO
|
Aucun(e) | Un redimensionnement d'un groupe d'instances |
SUSPENDED
|
ERROR
|
Aucun(e) | Le groupe |
RESIZING
|
WARNING
|
Aucun(e) | L'opération de redimensionnement du groupe d'instances |
EMRredimensionnement du groupe d'instances |
WARNING |
EC2provisionnement - Capacité d'instance insuffisante | Nous ne sommes pas en mesure de terminer l'opération de redimensionnement qui a débuté |
EMRredimensionnement du groupe d'instances |
WARNING |
EC2Provisionnement : adresse libre insuffisante dans le sous-réseau |
Nous ne pouvons pas terminer l'opération de redimensionnement du groupe d'instances InstanceGroupID dans le EMR cluster Amazon ClusterId (ClusterName) car le sous-réseau spécifié [Subnet1, Subnet2] ne contient pas suffisamment d'adresses IP privées libres pour répondre à votre demande. Utilisez cette DescribeSubnets opération pour voir combien d'adresses IP sont disponibles (non utilisées) dans votre sous-réseau. Pour plus d'informations sur la manière de réagir à cet événement, consultez la section Codes d'erreur pour Amazon EC2 API. |
EMRredimensionnement du groupe d'instances |
WARNING |
EC2Provisionnement - CPU Limite v dépassée |
Le redimensionnement du groupe d'instances InstanceGroupID dans le EMR cluster Amazon ClusterName est retardé car vous avez atteint la limite du nombre vCPUs (unités de traitement virtuelles) attribuées aux instances en cours d'exécution dans votreaccount (accountId) . Pour plus d'informations, consultez la section Codes d'erreur pour Amazon EC2 API. |
EMRredimensionnement du groupe d'instances |
WARNING |
EC2Provisionnement : limite du nombre d'instances ponctuelles dépassée |
La mise à disposition du groupe d'instances InstanceGroupID dans le EMR cluster Amazon ClusterID (ClusterName) est retardée car vous avez atteint la limite du nombre d'instances Spot que vous pouvez lancer dans votreaccount (accountId) . Pour plus d'informations, consultez la section Codes d'erreur pour Amazon EC2 API. |
EMRredimensionnement du groupe d'instances |
WARNING |
EC2Provisionnement : limite d'instances dépassée |
La mise à disposition du groupe d'instances InstanceGroupID dans le EMR cluster Amazon ClusterID (ClusterName) est retardée car vous avez atteint la limite du nombre d'instances à la demande que vous pouvez exécuter dans votreaccount (accountId) . Pour plus d'informations sur les codes d'erreur pour Amazon EC2 API. |
De |
INFO
|
Aucun(e) | Un redimensionnement du groupe d'instances |
Note
Avec Amazon EMR version 5.21.0 et versions ultérieures, vous pouvez remplacer les configurations de cluster et spécifier des classifications de configuration supplémentaires pour chaque groupe d'instances d'un cluster en cours d'exécution. Pour ce faire, utilisez la EMR console Amazon, le AWS Command Line Interface (AWS CLI) ou le AWS SDK. Pour plus d'informations, consultez Fourniture d'une configuration pour un groupe d'instances dans un cluster en cours d'exécution.
Le tableau suivant répertorie les EMR événements Amazon relatifs à l'opération de reconfiguration, ainsi que l'état ou le changement d'état indiqué par l'événement, la gravité de l'événement et les messages relatifs aux événements.
État ou changement d'état | Sévérité | Message |
---|---|---|
RUNNING
|
INFO
|
Une reconfiguration du groupe d'instances |
De |
INFO
|
L'opération de reconfiguration du groupe d'instances |
De |
INFO
|
Une reconfiguration d'un groupe d'instances |
RESIZING
|
INFO
|
L'opération de reconfiguration vers la version |
RECONFIGURING
|
INFO
|
L'opération de redimensionnement en fonction du nombre Num d'instances par groupe d'instances InstanceGroupID dans le EMR cluster Amazon ClusterId (ClusterName) est temporairement bloquée Time car le groupe d'instances est inclus. State |
RECONFIGURING
|
WARNING
|
L'opération de reconfiguration du groupe |
RECONFIGURING
|
INFO
|
Les configurations reviennent au numéro de version réussi précédent |
De |
INFO
|
Les configurations ont été rétablies avec succès à la version précédente réussie |
De |
CRITICAL
|
Impossible de revenir à la version réussie précédente |
Événements de politique de mise à l'échelle automatique
État ou changement d'état | Sévérité | Message |
---|---|---|
PENDING
|
INFO
|
Une politique Auto Scaling a été ajoutée au groupe d'instances du EMR cluster Amazon - ou - La politique Auto Scaling pour le groupe d'instances du |
ATTACHED
|
INFO
|
La politique Auto Scaling pour le groupe d'instances du |
|
INFO
|
La politique Auto Scaling pour le groupe d'instances du |
FAILED
|
ERROR
|
La politique Auto Scaling pour le groupe d'instances du - ou - La politique Auto Scaling pour le groupe d'instances du |
Événements d'étape
État ou changement d'état | Sévérité | Message |
---|---|---|
PENDING
|
INFO
|
L'étape |
CANCEL_PENDING
|
WARN
|
L'étape |
RUNNING
|
INFO
|
L'étape |
COMPLETED
|
INFO
|
L'exécution |
CANCELLED
|
WARN
|
La demande d'annulation a été acceptée pour l'étape de EMR cluster |
FAILED
|
ERROR
|
L'étape |
Événements de remplacement de nœuds défectueux
Type d’événement | Sévérité | Code de l'événement | Message |
---|---|---|---|
Remplacement d'un nœud Amazon EMR malsain |
INFO |
Nœud principal défectueux détecté |
Amazon EMR a identifié que l'instance |
Remplacement d'un nœud Amazon EMR malsain |
INFO |
Nœud principal défectueux - remplacement désactivé |
Amazon EMR a identifié que l'instance |
Remplacement d'un nœud Amazon EMR malsain |
WARN |
Le nœud principal défectueux n'a pas été remplacé |
Amazon ne EMR peut pas remplacer votre instance NoteLa raison pour laquelle Amazon ne EMR peut pas remplacer votre nœud principal varie en fonction de votre scénario. Par exemple, l'une des raisons pour lesquelles Amazon ne EMR peut pas supprimer un nœud est qu'il ne resterait aucun nœud principal dans un cluster. |
Remplacement d'un nœud Amazon EMR malsain |
INFO |
Nœud principal défectueux restauré |
Amazon EMR a récupéré vos instances |
Pour plus d'informations sur le remplacement de nœuds défectueux, consultez la section Remplacement de nœuds défectueux.
Afficher des événements avec la EMR console Amazon
Pour chaque cluster, vous pouvez consulter une liste simple d'événements dans le volet des détails, qui répertorie les événements par ordre décroissant d'occurrence. Vous pouvez également afficher tous les événements pour tous les clusters d'une région par ordre décroissant d'occurrence.
Si vous ne souhaitez pas qu'un utilisateur voit tous les événements de cluster pour une région, ajoutez une instruction qui refuse l'autorisation ("Effect": "Deny"
) pour l'action elasticmapreduce:ViewEventsFromAllClustersInConsole
à une politique attachée à l'utilisateur.
Pour afficher les événements de tous les clusters d'une région à l'aide de la console
-
Connectez-vous au et ouvrez AWS Management Console la EMR console Amazon à l'adresse https://console.aws.amazon.com/emr
. -
Sous EMRActivé EC2 dans le volet de navigation de gauche, sélectionnez Events.
Pour afficher les événements relatifs à un cluster spécifique à l'aide de la console
-
Connectez-vous au et ouvrez AWS Management Console la EMR console Amazon à l'adresse https://console.aws.amazon.com/emr
. -
Sous EMREC2Activé dans le volet de navigation de gauche, choisissez Clusters, puis choisissez un cluster.
-
Pour afficher tous vos événements, sélectionnez l'onglet Événements sur la page de détails du cluster.