Registrazione continua dei processi AWS Glue - AWS Glue

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Registrazione continua dei processi AWS Glue

AWS Glue fornisce la registrazione continua in tempo reale dei processi AWS Glue. Puoi visualizzare i log dei job di Apache Spark in tempo reale su Amazon CloudWatch, inclusi i log dei driver, i log degli esecutori e una barra di avanzamento dei job di Apache Spark. La visualizzazione di log in tempo reale fornisce una migliore prospettiva sul processo in esecuzione.

Quando avvii un AWS Glue job, invia le informazioni di registrazione in tempo reale a CloudWatch (ogni 5 secondi e prima di ogni chiusura dell'executor) dopo l'avvio dell'applicazione Spark. Puoi visualizzare i log sulla console o sulla dashboard della AWS Glue console. CloudWatch

La registrazione continua include le seguenti caratteristiche:

  • Registrazione continua

  • Un logger di script personalizzato per registrare messaggi specifici di applicazioni

  • La barra di avanzamento della console per monitorare lo stato di esecuzione del processo AWS Glue corrente

Per informazioni su come è supportata la registrazione continua in AWS Glue versione 2.0, consulta Esecuzione di processi ETL Spark con tempi di avvio ridotti.

Puoi limitare l'accesso ai gruppi o ai flussi di CloudWatch log per consentire ai ruoli IAM di leggere i log. Per maggiori dettagli sulla limitazione dell'accesso, consulta Using Identity-based policy (IAM policies) for Logs nella documentazione. CloudWatch CloudWatch

Nota

È possibile che vengano addebitati costi aggiuntivi quando si abilita la registrazione continua e vengono creati eventi di registro aggiuntivi. CloudWatch Per ulteriori informazioni, consulta i CloudWatch prezzi di Amazon.