Monitora i calcoli di Apache Spark con metriche CloudWatch - Amazon Athena

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Monitora i calcoli di Apache Spark con metriche CloudWatch

Athena pubblica metriche relative al calcolo su CloudWatch Amazon quando viene selezionata l'opzione per il tuo gruppo di lavoro abilitato a Publish CloudWatch metricsSpark. Puoi creare dashboard personalizzate, impostare allarmi e trigger sulle metriche nella console. CloudWatch

Athena pubblica la seguente metrica sulla CloudWatch console nel namespace: AmazonAthenaForApacheSpark

  • DPUCount— numero di dati DPUs consumati durante la sessione per eseguire i calcoli.

Questo parametro possiede le seguenti dimensioni:

  • SessionId: l'ID della sessione in cui vengono inviati i calcoli.

  • WorkGroup: il nome del gruppo di lavoro.

Per visualizzare i parametri per i gruppi di lavoro compatibili con Spark nella console Amazon CloudWatch

  1. Apri la console all'indirizzo. CloudWatch https://console.aws.amazon.com/cloudwatch/

  2. Nel pannello di navigazione, seleziona Metrics (Parametri), All metrics (Tutti i parametri).

  3. Selezionare lo spazio dei nomi AmazonAthenaForApacheSpark.

Per visualizzare le metriche con CLI

  • Esegui una di queste operazioni:

    • Per elencare i parametri per i gruppi di lavoro Athena abilitati per Spark, apri un prompt dei comandi e utilizza il comando seguente:

      aws cloudwatch list-metrics --namespace "AmazonAthenaForApacheSpark"

    • Per visualizzare un elenco di tutti i parametri disponibili, usare il comando seguente:

      aws cloudwatch list-metrics

Se hai abilitato le CloudWatch metriche nel tuo gruppo di lavoro Athena abilitato per Spark, Athena invia la seguente metrica a ciascun gruppo di lavoro. CloudWatch Il parametro utilizza lo spazio dei nomi AmazonAthenaForApacheSpark.

Nome parametro Descrizione
DPUCount Numero di DPUs (unità di elaborazione dati) consumate durante la sessione per eseguire i calcoli. A DPU è una misura relativa della potenza di elaborazione costituita dal 4% della capacità vCPUs di elaborazione e da 16 GB di memoria.

Questo parametro ha le seguenti dimensioni.

Dimensione Descrizione
SessionId

L'ID della sessione in cui vengono inviati i calcoli.
WorkGroup

Il nome del gruppo di lavoro.