本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
效能調校的基線策略
為了改善 AWS Glue 效能,您可以考慮更新特定效能相關 AWS Glue 參數。準備調校參數時,請使用以下最佳實務:
在開始識別問題之前,先決定您的效能目標。
嘗試變更調校參數之前,先使用指標來識別問題。
為在調校任務時得到最一致的結果,應制定調校工作的基線策略。
一般而言,效能調校依照以下工作流程進行:
決定效能目標。
量測指標。
識別瓶頸。
降低瓶頸的影響。
重複步驟 2-4,直到達到預期的目標。
為您的任務類型調整策略
Spark 任務 – 遵循 AWS 規範指南中 AWS Glue Apache Spark 任務效能調校最佳實務中的指引。
其他任務:您可以透過調整其他執行期環境中可用的策略 AWS Glue 來調校 Ray 和 AWS Glue Python shell 任務。