使用 AWS Glue 交互式会话准备数据

AWS Glue 交互式会话是一项无服务器服务，您可以利用它来收集、转换、清理和准备数据以存储在数据湖和数据管道中。 AWS Glue 交互式会话提供了按需提供的无服务器 Apache Spark 运行时环境，您可以在几秒钟内在专用的数据处理单元 (DPU) 上对其进行初始化，而无需预置和管理复杂的计算集群基础架构。初始化后，您可以直接在 Studio 或 Studio Classic 笔记本中浏览 AWS Glue 数据目录 AWS Lake Formation、运行大型查询、访问受控制的数据，以及使用 Spark 以交互方式分析和准备数据。然后，您可以使用 Studi SageMaker o 或 Studio Classic 中专门构建的机器学习工具，使用准备好的数据来训练、调整和部署模型。如果您想要对可配置性和灵活性进行适度控制的无服务器 Spark 服务，则应考虑使用 AWS Glue 交互式会话来处理数据准备工作负载。

您可以通过在 Studio 或 Studio Classic 中启动 JupyterLab 笔记本来启动 AWS Glue 交互式会话。启动笔记本时，请选择内置Glue PySpark and Ray或Glue Spark内核。这将自动启动交互式的无服务器 Spark 会话。您无需预置或管理任何计算集群或基础设施。初始化后，您可以在 Studio 或 Studio Classic 笔记本电脑中浏览数据并与之交互。

在 Studio 或 Studio Classic 中开始 AWS Glue 互动会话之前，您需要设置相应的角色和策略。此外，您可能需要提供对其他资源的访问权限，例如 Amazon S3 存储桶。有关所需IAM策略的更多信息，请参阅Studio 或 Studio 经典版中 AWS Glue 交互式会话。

Studio 和 Studio Classic 为您的 AWS Glue 交互式会话提供了默认配置，但是，您可以使用完整 AWS Glue的 Jupyter 魔法命令目录来进一步自定义您的环境。有关可在 AWS Glue 交互式会话中使用的默认和其他 Jupyter 魔法的信息，请参阅。在 Studio 或 Studio 经典版中配置 AWS Glue 互动会话