AWS Data Pipeline 는 더 이상 신규 고객이 사용할 수 없습니다. 의 기존 고객은 평소와 같이 서비스를 계속 사용할 AWS Data Pipeline 수 있습니다. [자세히 알아보기](https://aws.amazon.com/blogs/big-data/migrate-workloads-from-aws-data-pipeline/)
기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.
# EmrConfiguration
EmrConfiguration 객체는 릴리스 4.0.0 또는 이상 버전을 사용하는 EMR 클러스터에 사용되는 구성입니다. 구성(목록)은 RunJobFlow API를 호출하는 파라미터입니다. Amazon EMR용 구성 API는 분류 및 속성을 사용합니다.는 해당하는 속성 객체와 함께 EmrConfiguration을 AWS Data Pipeline 사용하여 파이프라인 실행에서 시작된 EMR 클러스터의 하둡, Hive, Spark 또는 Pig와 같은 [EmrCluster](dp-object-emrcluster.md) 애플리케이션을 구성합니다. 구성은 새로운 클러스터로 변경될 수 있기 때문에 기존 리소스에 EmrConfiguration 객체를 제공할 수 없습니다. 자세한 내용은 [https://docs.aws.amazon.com/ElasticMapReduce/latest/ReleaseGuide/](https://docs.aws.amazon.com/ElasticMapReduce/latest/ReleaseGuide/) 단원을 참조하십시오.
## 예제
다음 구성 객체는 `core-site.xml`으로 `io.file.buffer.size` 및 `fs.s3.block.size` 속성을 설정합니다.
```
[
{
"classification":"core-site",
"properties":
{
"io.file.buffer.size": "4096",
"fs.s3.block.size": "67108864"
}
}
]
```
해당 파이프라인 객체 정의는 `property` 필드의 속성 객체 목록 및 EmrConfiguration 객체를 사용합니다.
```
{
"objects": [
{
"name": "ReleaseLabelCluster",
"releaseLabel": "emr-4.1.0",
"applications": ["spark", "hive", "pig"],
"id": "ResourceId_I1mCc",
"type": "EmrCluster",
"configuration": {
"ref": "coresite"
}
},
{
"name": "coresite",
"id": "coresite",
"type": "EmrConfiguration",
"classification": "core-site",
"property": [{
"ref": "io-file-buffer-size"
},
{
"ref": "fs-s3-block-size"
}
]
},
{
"name": "io-file-buffer-size",
"id": "io-file-buffer-size",
"type": "Property",
"key": "io.file.buffer.size",
"value": "4096"
},
{
"name": "fs-s3-block-size",
"id": "fs-s3-block-size",
"type": "Property",
"key": "fs.s3.block.size",
"value": "67108864"
}
]
}
```
다음 예제는 `hadoop-env` 분류를 사용하여 Hadoop 환경을 설정하도록 사용된 중첩 구성입니다.
```
[
{
"classification": "hadoop-env",
"properties": {},
"configurations": [
{
"classification": "export",
"properties": {
"YARN_PROXYSERVER_HEAPSIZE": "2396"
}
}
]
}
]
```
다음은 이 구성을 사용하는 해당 파이프라인 정의 객체입니다.
```
{
"objects": [
{
"name": "ReleaseLabelCluster",
"releaseLabel": "emr-4.0.0",
"applications": ["spark", "hive", "pig"],
"id": "ResourceId_I1mCc",
"type": "EmrCluster",
"configuration": {
"ref": "hadoop-env"
}
},
{
"name": "hadoop-env",
"id": "hadoop-env",
"type": "EmrConfiguration",
"classification": "hadoop-env",
"configuration": {
"ref": "export"
}
},
{
"name": "export",
"id": "export",
"type": "EmrConfiguration",
"classification": "export",
"property": {
"ref": "yarn-proxyserver-heapsize"
}
},
{
"name": "yarn-proxyserver-heapsize",
"id": "yarn-proxyserver-heapsize",
"type": "Property",
"key": "YARN_PROXYSERVER_HEAPSIZE",
"value": "2396"
},
]
}
```
다음 예에서는 EMR 클러스터의 Hive 지정 속성을 수정합니다.
```
{
"objects": [
{
"name": "hivesite",
"id": "hivesite",
"type": "EmrConfiguration",
"classification": "hive-site",
"property": [
{
"ref": "hive-client-timeout"
}
]
},
{
"name": "hive-client-timeout",
"id": "hive-client-timeout",
"type": "Property",
"key": "hive.metastore.client.socket.timeout",
"value": "2400s"
}
]
}
```
## 구문
이 객체에는 다음 필드가 포함됩니다.
****
| 필수 필드 | 설명 | 슬롯 유형 |
| --- | --- | --- |
| 분류 | 구성에 대한 분류입니다. | 문자열 |
****
| 선택 필드 | 설명 | 슬롯 유형 |
| --- | --- | --- |
| 구성 | 이 구성의 하위 구성입니다. | 참조 객체. 예: "configuration":\$1"ref":"myEmrConfigurationId"\$1 |
| parent | 슬롯을 상속할 현재 객체의 부모입니다. | 참조 객체. 예: "parent":\$1"ref":"myBaseObjectId"\$1 |
| 속성 | 구성 속성입니다. | 참조 객체. 예: "property":\$1"ref":"myPropertyId"\$1 |
****
| 실행 시간 필드 | 설명 | 슬롯 유형 |
| --- | --- | --- |
| @version | 객체와 함께 생성된 파이프라인 버전입니다. | 문자열 |
****
| 시스템 필드 | 설명 | 슬롯 유형 |
| --- | --- | --- |
| @오류 | 잘못 형성된 객체를 설명하는 오류 | 문자열 |
| @pipelineId | 이 객체가 속하는 파이프라인의 ID | 문자열 |
| @sphere | 객체의 타원 무늬는 수명 주기 내 위치를 나타냅니다. Component Objects는 Attempt Objects를 실행하는 Instance Objects를 야기합니다. | 문자열 |
## 참고
+ [EmrCluster](dp-object-emrcluster.md)
+ [속성](dp-object-property.md)
+ [Amazon EMR 릴리즈 가이드](https://docs.aws.amazon.com/ElasticMapReduce/latest/ReleaseGuide/)