클러스터에 작업 제출 - 아마존 EMR

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

클러스터에 작업 제출

이 섹션에서는 Amazon EMR 클러스터에 작업을 제출하는 데 사용할 수 있는 방법을 설명합니다. 작업을 제출하려면 단계를 추가하거나 대화식으로 Hadoop 작업을 프라이머리 노드에 제출할 수 있습니다.

클러스터에 단계를 제출할 때는 다음과 같은 단계 동작 규칙을 고려합니다.

  • 단계 ID는 최대 256자를 포함할 수 있습니다.

  • 클러스터에는 최대 256개의 PENDING RUNNING 단계가 있을 수 있습니다.

  • 클러스터에서 실행 중인 256개의 활성 단계가 있더라도 작업을 프라이머리 노드에 대화형으로 제출할 수 있습니다. 장기 실행 클러스터의 수명 주기 동안 제출할 수 있는 단계 수에는 제한이 없지만 한 PENDING 번에 제출할 RUNNING 수 있는 단계는 256개뿐입니다.

  • Amazon EMR 버전 4.8.0 이상 (버전 5.0.0은 제외) 에서는 보류 중인 단계를 취소할 수 있습니다. 자세한 내용은 단계 취소 단원을 참조하십시오.

  • Amazon EMR 버전 5.28.0 이상에서는 보류 중인 단계와 실행 중인 단계를 모두 취소할 수 있습니다. 또한 여러 단계를 병렬로 실행하여 클러스터 사용률을 향상하고 비용을 절감할 수 있습니다. 자세한 내용은 여러 단계를 병렬로 실행하기 위한 고려 사항 단원을 참조하십시오.

참고

최상의 성능을 위해 EMR Amazon에서 사용하려는 사용자 지정 부트스트랩 작업, 스크립트 및 기타 파일을 클러스터와 AWS 리전 동일한 Amazon S3 버킷에 저장하는 것이 좋습니다.