Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.
Configurazione di spark-submit per Amazon EMR su EKS
Completa le seguenti attività per definire la configurazione prima di poter eseguire un'applicazione con spark-submit in Amazon EMR su EKS. Se hai già effettuato la registrazione ad Amazon Web Services (AWS) e hai utilizzato Amazon EKS, ti manca poco per cominciare a utilizzare Amazon EMR su EKS. Se hai già completato uno dei prerequisiti, puoi saltarli e passare a quello successivo.
-
Installa o aggiorna alla versione più recente di AWS CLI: se hai già installato il AWS CLI, conferma di disporre della versione più recente.
-
Configura kubectl ed eksctl: eksctl è uno strumento da riga di comando che usi per comunicare con Amazon EKS.
-
Inizia a usare Amazon EKS — eksctl — Segui i passaggi per creare un nuovo cluster Kubernetes con nodi in Amazon EKS.
-
Seleziona un URI dell'immagine di base Amazon EMR (rilascio 6.10.0 o successivo): il comando
spark-submit
è supportato con i rilasci 6.10.0 e successivi di Amazon EMR. -
Verifica che l'account di servizio del driver disponga delle autorizzazioni adeguate per creare e osservare i pod dell'executor. Per ulteriori informazioni, consulta Verifica i requisiti di sicurezza dell'account del servizio driver Spark per spark-submit.
-
Configura il tuo profilo di credenziali AWS locale.
-
Dalla console Amazon EKS, scegli il tuo cluster EKS, quindi trova l'endpoint del cluster EKS, che si trova in Panoramica, Dettagli, quindi Endpoint del server API.