Apache Spark AWS Glue 작업의 성능 조정 모범 사례

로만 마이어스, 타카시 오니쿠라, 노리타카 세키야마, Amazon Web Services ()AWS

2023년 12월(문서 기록)

AWS Glue 성능 튜닝을 위한 다양한 옵션을 제공합니다. 이 가이드에서는 Apache Spark AWS Glue 튜닝에 대한 주요 주제를 정의합니다. 그런 다음 Apache Spark AWS Glue 작업에 맞게 이를 조정할 때 따라야 할 기본 전략을 제공합니다. 이 가이드를 통해 에서 사용할 수 있는 메트릭을 해석하여 성능 문제를 식별하는 방법을 알아보십시오. AWS Glue그런 다음 이러한 문제를 해결하기 위한 전략을 통합하여 성능을 극대화하고 비용을 최소화하십시오.

이 가이드에서는 다음과 같은 조정 방법을 다룹니다.