Criar um cluster com o Flink

Iniciar um cluster com o Flink instalado no console

1. Abra o EMR console da Amazon em https://console.aws.amazon.com/emr.

2. Escolha Create cluster (Criar cluster), Go to advanced options (Ir para opções avançadas).

3. Para Configuração de software, escolha EMRRelease emr-5.1.0 ou posterior.

4. Selecione Flink como um aplicativo, juntamente com outros a serem instalados.

5. Selecione as outras opções conforme necessário e selecione Create cluster (Criar cluster).

Para iniciar um cluster com o Flink a partir do AWS CLI

• Crie o cluster usando o seguinte comando:

  aws emr create-cluster --release-label emr-7.2.0 \
  --applications Name=Flink \
  --configurations file://./configurations.json \
  --region us-east-1 \
  --log-uri s3://myLogUri \
  --instance-type m5.xlarge \
  --instance-count 2 \
  --service-role EMR_DefaultRole_V2 \ 
  --ec2-attributes KeyName=MyKeyName,InstanceProfile=EMR_EC2_DefaultRole \
  --steps Type=CUSTOM_JAR,Jar=command-runner.jar,Name=Flink_Long_Running_Session,\
  Args=flink-yarn-session,-d

  nota

  Os caracteres de continuação de linha do Linux (\) são incluídos para facilitar a leitura. Eles podem ser removidos ou usados ​​em comandos do Linux. No Windows, remova-os ou substitua-os por um sinal de interpolação (^).