AWS Glue Ray 互動式工作階段支援的魔術命令 - AWS Glue

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

AWS Glue Ray 互動式工作階段支援的魔術命令

適用於 AWS Glue Jupyter 核心的魔術命令,當其為 Ray 互動式工作階段提供支援時,與 Spark 工作階段的魔術命令類似。如需參考資訊,請參閱 設定 AWS Glue Jupyter 和 的互動式工作階段 AWS Glue Studio 筆記本

Sessions magics (工作階段魔術命令)

工作階段魔術命令大致上與 AWS Glue for Ray 預覽版之前的相同。如需有關此預覽版之外的工作階段魔法的詳細資訊,請參閱 支援的魔術 AWS Glue Jupyter 的互動式工作階段 。我們引入了一種新的魔術命令,可將工作階段類型設定為 AWS Glue for Ray。

Name 類型 描述
%glue_ray 字串 將工作階段類型變更為 AWS Glue for Ray。

AWS GlueConfig 魔法

在互動式工作階段中設定 AWS Glue 的魔術命令,可能會在各個工作階段之間有所差異。目前,我們僅針對使用 AWS Glue for Ray 支援此現有魔術命令子集。

警告

已知問題:additional_python_modules

在 Ray 互動式工作階段預覽版中,使用 additional_python_modules 魔術命令會在儲存筆記本時造成問題。若要為 Ray 工作階段設定 Python 模組,請使用 %%configure 魔術命令來設定 在 Ray 任務中使用任務參數 中定義的 pip-install 參數。

Name 類型 描述
%%configure 字典 指定由工作階段的所有組態參數組成的 JSON 格式字典。可以在此處或透過個別魔術命令來指定每個參數。
%iam_role 字串 指定用來執行工作階段的 IAM 角色 ARN。預設來自 ~/.aws/configure
%number_of_workers int 當任務執行時所分配的已定義 worker_type 的工作者數目。還必須設定 worker_type
%worker_type 字串 在 AWS Glue for Ray 預覽版中,唯一支援的工作者類型為 Z.2X。
%additional_python_modules 列出 要包含在叢集中的以逗號分隔的其他 Python 模組清單 (可以來自 Pypi 或 S3)。

Action magics (動作魔術命令)

AWS Glue Ray 工作階段不支援任何動作魔術命令。