持續記錄 AWS Glue 任務 - AWS Glue

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

持續記錄 AWS Glue 任務

AWS Glue 提供 AWS Glue 任務的即時、持續記錄。您可以在 Amazon 中檢視即時 Apache Spark 任務日誌 CloudWatch,包括驅動程式日誌、執行器日誌和 Apache Spark 任務進度列。檢視即時日誌可讓您更了解執行中的任務。

當您啟動 AWS Glue 任務時,它會在 Spark 應用程式開始執行後,將即時記錄資訊傳送至 CloudWatch (每 5 秒,以及每個執行器終止之前)。您可以在 AWS Glue 主控台或 CloudWatch 主控台儀表板上檢視日誌。

持續記錄功能包含下列功能:

  • 連續記錄

  • 以自訂指令碼記錄器記錄應用程式特定訊息

  • 追蹤目前 AWS Glue 任務執行狀態的主控台進度列

您可以限制存取 CloudWatch 日誌群組或串流,讓IAM角色讀取日誌。如需限制存取的詳細資訊,請參閱 CloudWatch 文件中的針對 CloudWatch 日誌使用身分型政策 (IAM 政策)

注意

當您啟用持續記錄並建立其他 CloudWatch 日誌事件時,可能會產生額外費用。如需詳細資訊,請參閱 Amazon CloudWatch 定價