Monitoraggio dei processi di Ray con i parametri - AWS Glue

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Monitoraggio dei processi di Ray con i parametri

Puoi monitorare i lavori Ray utilizzando AWS Glue Studio e Amazon CloudWatch. CloudWatch raccoglie ed elabora le metriche non elaborate AWS Glue con Ray, che le rende disponibili per l'analisi. Queste metriche vengono visualizzate nella AWS Glue Studio console, in modo da poter monitorare il lavoro mentre viene eseguito.

Per una panoramica generale su come monitorare AWS Glue, consulta. Monitoraggio AWS Glue utilizzo dei CloudWatch parametri di Amazon Per una panoramica generale su come utilizzare le CloudWatch metriche pubblicate da AWS Glue, consultaMonitoraggio con Amazon CloudWatch.

Monitoraggio dei job di Ray nella console AWS Glue

Nella pagina dei dettagli dell'esecuzione di un lavoro, sotto la sezione Dettagli dell'esecuzione, puoi visualizzare grafici aggregati predefiniti che visualizzano le metriche dei job disponibili. AWS Glue Studio invia le metriche dei job a per ogni job eseguito. CloudWatch Con questi, è possibile creare un profilo del cluster e delle attività, nonché accedere a informazioni dettagliate su ciascun nodo.

Per ulteriori informazioni sui grafici di parametri disponibili, consulta Visualizzazione delle Amazon CloudWatch metriche per l'esecuzione di un job Ray.

Panoramica delle metriche di Ray Jobs in CloudWatch

Pubblichiamo le metriche Ray quando è abilitato il monitoraggio dettagliato. CloudWatch Le metriche vengono pubblicate nel namespace. Glue/Ray CloudWatch

  • Parametri dell'istanza

    Pubblichiamo i parametri sull'utilizzo della CPU, della memoria e del disco delle istanze assegnate a un processo. Questi parametri sono identificati da funzionalità quali ExecutorId, ExecutorType e host. Queste metriche sono un sottoinsieme delle metriche standard degli agenti Linux. CloudWatch Puoi trovare informazioni sui nomi e le funzionalità delle metriche nella documentazione. CloudWatch Per ulteriori informazioni, consulta Metriche raccolte dall' CloudWatch agente.

  • Parametri del cluster Ray

    Inoltriamo i parametri dai processi Ray che eseguono lo script a questo spazio dei nomi, quindi ti trasmettiamo quelli più rilevanti per te. I parametri disponibili potrebbero differire in base alla versione di Ray. Per ulteriori informazioni sulla versione di Ray utilizzata dal processo, consulta AWS Glue versioni.

    Ray raccoglie i parametri a livello di istanza. Inoltre, fornisce parametri per le attività e il cluster. Per ulteriori informazioni sulla strategia dei parametri di base di Ray, consulta la pagina Metrics nella documentazione di Ray.

Nota

Non pubblichiamo i parametri Ray nello spazio dei nomi Glue/Job Metrics/; questo viene utilizzato solo per i processi AWS Glue ETL.