Crie um EMR cluster Amazon de curta duração e execute uma etapa usando um AWS SDK - AWS SDKExemplos de código

Há mais AWS SDK exemplos disponíveis no GitHub repositório AWS Doc SDK Examples.

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Crie um EMR cluster Amazon de curta duração e execute uma etapa usando um AWS SDK

O exemplo de código a seguir mostra como criar um EMR cluster Amazon de curta duração que executa uma etapa e termina automaticamente após a conclusão da etapa.

Python
SDKpara Python (Boto3)

Crie um EMR cluster Amazon de curta duração que estime o valor de pi usando o Apache Spark para paralelizar um grande número de cálculos. O trabalho grava a saída EMR nos registros da Amazon e em um bucket do Amazon Simple Storage Service (Amazon S3). O cluster é encerrado automaticamente após a conclusão do trabalho.

  • Crie um bucket do Amazon S3 e carregue um script de trabalho.

  • Crie AWS Identity and Access Management (IAM) funções.

  • Crie grupos de segurança do Amazon Elastic Compute Cloud (AmazonEC2).

  • Criar um cluster de curta duração e executar uma única etapa do trabalho.

Este exemplo é melhor visualizado em GitHub. Para obter o código-fonte completo e instruções sobre como configurar e executar, veja o exemplo completo em GitHub.

Serviços utilizados neste exemplo
  • Amazon EMR