Kontinuierliche Protokollierung für AWS Glue-Aufträge - AWS Glue

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Kontinuierliche Protokollierung für AWS Glue-Aufträge

AWS Glue unterstützt die kontinuierliche Echtzeitprotokollierung für AWS Glue-Aufträge. Sie können Apache-Spark-Auftragsprotokolle in Echtzeit in Amazon anzeigen CloudWatch, einschließlich Treiberprotokollen, Executor-Protokollen und einer Apache-Spark-Auftragsfortschrittsleiste. Das Anzeigen von Echtzeitprotokollen bietet eine bessere Perspektive im Hinblick auf den ausgeführten Auftrag.

Wenn Sie einen -AWS GlueAuftrag starten, sendet er die Echtzeit-Protokollierungsinformationen an CloudWatch (alle 5 Sekunden und vor jeder Beendigung des Executors), nachdem die Spark-Anwendung gestartet wurde. Sie können die Protokolle in der -AWS GlueKonsole oder im - CloudWatch Konsolen-Dashboard anzeigen.

Das Feature für kontinuierliche Protokollierung umfasst folgende Funktionen:

  • Kontinuierliche Protokollierung

  • Benutzerdefinierter Skript-Logger zum Protokollieren anwendungsspezifischer Meldungen

  • Fortschrittsbalken zum Überwachen des Ausführungsstatus des aktuellen AWS Glue-Auftrags in der Konsole

Informationen dazu, wie kontinuierliche Protokollierung in AWS Glue Version 2.0 unterstützt wird, finden Sie unter Ausführen von Spark-ETL-Aufträgen mit verkürzten Startzeiten.

Sie können den Zugriff auf CloudWatch Protokollgruppen oder Streams einschränken, damit IAM-Rollen die Protokolle lesen können. Weitere Informationen zum Einschränken des Zugriffs finden Sie unter Verwenden von identitätsbasierten Richtlinien (IAM-Richtlinien) für CloudWatch Protokolle in der - CloudWatch Dokumentation.

Anmerkung

Es können zusätzliche Gebühren anfallen, wenn Sie die kontinuierliche Protokollierung aktivieren und zusätzliche CloudWatch Protokollereignisse erstellt werden. Weitere Informationen finden Sie unter Amazon- CloudWatch Preise.