Estrategia básica para ajustar el rendimiento
Para mejorar el rendimiento de AWS Glue, se recomienda que actualice algunos parámetros de AWS Glue relacionados con el rendimiento. Cuando se prepare para ajustar los parámetros, siga las siguientes prácticas recomendadas:
Determine sus objetivos de rendimiento antes de empezar a identificar los problemas.
Utilice las métricas para identificar los problemas antes de intentar cambiar los parámetros de ajuste.
Para obtener resultados más consistentes al afinar un trabajo, desarrolle una estrategia básica para su trabajo de ajuste.
Por lo general, el ajuste del rendimiento se realiza en el siguiente flujo de trabajo:
Determine los objetivos de rendimiento.
Mida las métricas.
Identifique los cuellos de botella.
Reduzca el impacto de los cuellos de botella.
Repita los pasos 2 a 4 hasta alcanzar el objetivo deseado.
Ajuste de las estrategias para el tipo de trabajo
Trabajos de Spark: siga la guía de las Prácticas recomendadas de ajuste del rendimiento de AWS Glue para los trabajos de Apache Spark en las Recomendaciones de AWS.
Otros trabajos: puede ajustar AWS Glue para trabajos de intérprete de comandos de Ray y AWS Glue Python al adaptar las estrategias disponibles en otros entornos de tiempo de ejecución.
