在 Amazon 中設定 Flink EMR

在主控台中建立具有 Flink 和 Java 11 執行時間的叢集

1. 登入 AWS Management Console，並在 https://console.aws.amazon.com/emr 開啟 Amazon EMR主控台。

2. 在導覽窗格中的 EMR EC2下選擇叢集，然後選擇建立叢集。

3. 選取 Amazon 6EMR.12.0 版或更新版本，然後選擇安裝 Flink 應用程式。選取您要在您的叢集上安裝的任何其他應用程式。

4. 繼續設定您的叢集。在選用軟體設定區段中，使用預設輸入組態選項，然後輸入下列組態：

   [
       {
         "Classification": "flink-conf",
         "Properties": {
           "containerized.taskmanager.env.JAVA_HOME":"/usr/lib/jvm/jre-11",
           "containerized.master.env.JAVA_HOME":"/usr/lib/jvm/jre-11",
           "env.java.home":"/usr/lib/jvm/jre-11"
         }
       }
   ]

5. 繼續設定並啟動您的叢集。

從 建立具有 Flink 和 Java 11 執行時間的叢集 CLI

1. 建立將 Flink 設定為使用 Java 11 的組態檔案 configurations.json。

   [
       {
         "Classification": "flink-conf",
         "Properties": {
           "containerized.taskmanager.env.JAVA_HOME":"/usr/lib/jvm/jre-11",
           "containerized.master.env.JAVA_HOME":"/usr/lib/jvm/jre-11",
           "env.java.home":"/usr/lib/jvm/jre-11"
         }
       }
   ]

2. 從 中 AWS CLI，使用 Amazon 6.12.0 EMR 或更新版本建立新的EMR叢集，並安裝 Flink 應用程式，如下列範例所示：

   aws emr create-cluster --release-label emr-6.12.0 \ 
   --applications Name=Flink \ 
   --configurations file://./configurations.json \ 
   --region us-east-1 \ 
   --log-uri s3://myLogUri \ 
   --instance-type m5.xlarge \ 
   --instance-count 2 \ 
   --service-role EMR_DefaultRole_V2 \ 
   --ec2-attributes KeyName=YourKeyName,InstanceProfile=EMR_EC2_DefaultRole
   

在主控台中使用 Flink 和 Java 11 執行時間更新執行中的叢集

1. 登入 AWS Management Console，並在 https://console.aws.amazon.com/emr 開啟 Amazon EMR主控台。

2. 在導覽窗格中EMR的 EC2下選擇叢集，然後選擇您要更新的叢集。

   注意

   叢集必須使用 Amazon 6EMR.12.0 版或更新版本來支援 Java 11。

3. 選取組態標籤。

4. 在執行個體群組組態區段中，選取您要更新的執行中執行個體群組，然後從清單動作功能表中選擇重新設定。

5. 使用編輯屬性選項重新設定執行個體群組，如下所示。在每一項之後選取新增組態。

   分類	屬性	Value
   flink-conf	containerized.taskmanager.env.JAVA_HOME	/usr/lib/jvm/jre-11
   flink-conf	containerized.master.env.JAVA_HOME	/usr/lib/jvm/jre-11
   flink-conf	env.java.home	/usr/lib/jvm/jre-11

6. 選取儲存變更以新增組態。

從 更新執行中的叢集以使用 Flink 和 Java 11 執行時間 CLI

使用 modify-instance-groups 命令，為執行中叢集中的執行個體群組指定新組態。

1. 首先，建立將 Flink 設定為使用 Java 11 的組態檔案 configurations.json。在下列範例中，將 ig-1xxxxxxx9取代為您要重新設定之執行個體群組的 ID。將檔案儲存在執行 modify-instance-groups 命令的相同目錄中。

   [
      {
         "InstanceGroupId":"ig-1xxxxxxx9",
         "Configurations":[
            {
               "Classification":"flink-conf",
               "Properties":{
                 "containerized.taskmanager.env.JAVA_HOME":"/usr/lib/jvm/jre-11",
                 "containerized.master.env.JAVA_HOME":"/usr/lib/jvm/jre-11",
                 "env.java.home":"/usr/lib/jvm/jre-11"
               },
               "Configurations":[]
            }
         ]
      }
   ]

2. 從 中 AWS CLI，執行下列命令。取代您要重新設定的執行個體群組的 ID：

   aws emr modify-instance-groups --cluster-id j-2AL4XXXXXX5T9 \
   --instance-groups file://configurations.json