本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
AWS Glue Ray 互動式工作階段支援的魔術命令
適用於 AWS Glue Jupyter 核心的魔術命令,當其為 Ray 互動式工作階段提供支援時,與 Spark 工作階段的魔術命令類似。如需參考資訊,請參閱 設定 AWS Glue Jupyter 和 的互動式工作階段 AWS Glue Studio 筆記本 。
Sessions magics (工作階段魔術命令)
工作階段魔術命令大致上與 AWS Glue for Ray 預覽版之前的相同。如需有關此預覽版之外的工作階段魔法的詳細資訊,請參閱 支援的魔術 AWS Glue Jupyter 的互動式工作階段 。我們引入了一種新的魔術命令,可將工作階段類型設定為 AWS Glue for Ray。
Name | 類型 | 描述 |
---|---|---|
%glue_ray
|
字串 | 將工作階段類型變更為 AWS Glue for Ray。 |
AWS GlueConfig 魔法
在互動式工作階段中設定 AWS Glue 的魔術命令,可能會在各個工作階段之間有所差異。目前,我們僅針對使用 AWS Glue for Ray 支援此現有魔術命令子集。
警告
已知問題:additional_python_modules
在 Ray 互動式工作階段預覽版中,使用 additional_python_modules
魔術命令會在儲存筆記本時造成問題。若要為 Ray 工作階段設定 Python 模組,請使用 %%configure
魔術命令來設定 在 Ray 任務中使用任務參數 中定義的 pip-install
參數。
Name | 類型 | 描述 |
---|---|---|
%%configure
|
字典 | 指定由工作階段的所有組態參數組成的 JSON 格式字典。可以在此處或透過個別魔術命令來指定每個參數。 |
%iam_role |
字串 | 指定用來執行工作階段的 IAM 角色 ARN。預設來自 ~/.aws/configure |
%number_of_workers |
int | 當任務執行時所分配的已定義 worker_type 的工作者數目。還必須設定 worker_type 。 |
%worker_type |
字串 | 在 AWS Glue for Ray 預覽版中,唯一支援的工作者類型為 Z.2X。 |
%additional_python_modules |
列出 | 要包含在叢集中的以逗號分隔的其他 Python 模組清單 (可以來自 Pypi 或 S3)。 |
Action magics (動作魔術命令)
AWS Glue Ray 工作階段不支援任何動作魔術命令。