Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Exécution de tâches Spark avec Amazon EMR sur EKS
Une exécution de tâche est une unité de travail, telle qu'un fichier JAR, un PySpark script ou une SQL requête Spark, que vous soumettez à Amazon EMR surEKS. Cette rubrique fournit une vue d'ensemble de la gestion des exécutions de tâches à l'aide de la console Amazon AWS CLI, de l'affichage des exécutions de tâches à l'aide de la EMR console Amazon et de la résolution des erreurs courantes d'exécution de tâches.
Notez que vous ne pouvez pas exécuter de tâches IPv6 Spark sur Amazon EMR sur EKS
Note
Avant de soumettre une tâche exécutée avec Amazon EMR surEKS, vous devez suivre les étapes décrites dansConfiguration d'Amazon EMR sur EKS.
Rubriques
- Exécution de tâches Spark avec StartJobRun
- Exécution de tâches Spark à l'aide de l'opérateur Spark
- Exécution de tâches Spark en utilisant spark-submit
- Utilisation d'Apache Livy avec Amazon sur EMR EKS
- Gestion d'Amazon EMR lors de l'exécution des EKS tâches
- Utilisation de la classification des soumissionnaires de tâches
- Utilisation des modèles de tâche
- Utilisation de modèles de pods
- Utilisation des politiques de relance des tâches
- Utilisation de la rotation des journaux des événements Spark
- Utilisation de la rotation des journaux des conteneurs Spark
- Utilisation de la mise à l'échelle automatique verticale avec les tâches Amazon EMR Spark