運行一個 EMR Serverless job - AWS Step Functions

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

運行一個 EMR Serverless job

此範例專案示範如何建立和啟動 EMR Serverless 應用程序並在其中運行多個作業。

此示例項目創建狀態機,支持 AWS 資源,並配置相關IAM權限。探索此範例專案以了解跑步 EMR Serverless 工作使用 Step Functions 狀態機,或者將其用作您自己項目的起點。

重要

EMR Serverless 沒有免費定價方案。執行範例專案將產生費用。您可以在以下位置找到定價資訊:Amazon EMR Serverless 定價頁面。

此外,可用性 EMR Serverless 服務整合需視乎供應情況而定 EMR Serverless APIs。因此,此示例項目可能無法正常工作或在某些項目中可用 AWS 區域。 如需可用性的相關資訊,請參閱其他考量主題 EMR Serverless in AWS 區域.

AWS CloudFormation 模板和其他資源

您使用 CloudFormation 用於部署此範例專案的範本。此範本會在您的中建立下列資源 AWS 帳戶:

  • A Step Functions 狀態機。

  • 狀態機器的執行角色。此角色授予您的狀態機訪問其他所需的權限 AWS 服務 和資源,如 EMR Serverless CreateApplication動作。

  • Job 執行角色 EMR Serverless。 此角色授予的權限 EMR Serverless 工作執行可以假設它代表您呼叫其他服務時。

步驟 1:建立狀態機

  1. 開啟 Step Functions 主控台,然後選擇建立狀態機器

  2. EMR Serverless在搜尋方塊中輸入,然後選擇 [執行] EMR Serverless 傳回的搜尋結果中的工作。

  3. 選擇 Next (下一步) 繼續。

  4. 選擇 [執行示範] 以建立唯讀和 ready-to-deploy 工作流程,或選擇 [在其上建置] 建立可編輯的狀態機定義,您可以在其上建置並稍後進行部署。

    此範例專案會部署下列資源:

    • A Step Functions 狀態機器

    • 相關 AWS Identity and Access Management (IAM) 角色

    下圖顯示了「執行」的工作流程圖形 EMR Serverless 工作樣本項目:

    運行 a 的工作流程圖 EMR Serverless 工作樣本項目。
  5. 選擇「使用範本」繼續進行選取。

下一步取決於您之前的選擇:

  1. 執行示範 — 您可以先檢閱狀態機器,然後再建立唯讀專案,其中包含部署的資源 AWS CloudFormation 到您的 AWS 帳戶.

    您可以檢視狀態機器定義,當您準備就緒時,請選擇 [部署並執行] 以部署專案並建立資源。

    部署最多可能需要 10 分鐘的時間來建立資源和權限。您可以使用「堆疊 ID」連結來監控進度 AWS CloudFormation.

    部署完成後,您應該會在控制台中看到新的狀態機器。

  2. 建立在其上 — 您可以檢閱和編輯工作流程定義。您可能需要在範例專案中設定預留位置的值,然後才能嘗試執行自訂工作流程。

注意

部署到您帳戶的服務可能需要支付標準費用。

步驟 2:運行狀態機

  1. 在 [狀態電腦] 頁面上,選擇您的範例專案。

  2. 在範例專案頁面上,選擇 [開始執行]。

  3. 在 [開始執行] 對話方塊中,執行下列動作:

    1. (選擇性) 輸入自訂執行名稱,以覆寫產生的預設值。

      非ASCII名稱和記錄

      Step Functions 接受包含非ASCII字元的狀態機器、執行項目、活動和標籤的名稱。由於此類字元不適用於 Amazon CloudWatch,因此我們建議您僅使用ASCII字元,以便在中追蹤指標 CloudWatch。

    2. (選擇性) 在「入」方塊中,將輸入值輸入為JSON。如果您正在運行演示,則可以跳過此步驟。

    3. 選擇 Start execution (開始執行)

    「Step Functions」主控台會將您導向「執行詳細資訊」頁面,您可以在其中選擇「圖形」檢視中的狀態,以瀏覽步驟詳情窗格中的相關資訊。