Amazon EMR WAL에 대한 고려 사항 및 리전

Amazon EMR WAL은 Amazon EMR 릴리스 6.15.0 이상에서 사용할 수 있습니다.

Amazon EMR WAL은 옵트인 유료 서비스입니다. 읽기, 쓰기 및 데이터 스토리지와 같은 사용 작업에 대한 비용을 지불합니다. 자세한 내용은 Amazon EMR WAL 요금 및 지표 이해 및 Amazon EMR 요금 페이지를 참조하세요.

Amazon EMR WAL은 HBase 미리 쓰기 로그(WAL)를 사용합니다. Amazon EMR WAL을 사용하려면 클러스터에서 HBase WAL을 사용해야 합니다.

클러스터를 생성할 때 Amazon EMR WAL을 활성화하려면 필수 역할 권한이 있어야 합니다. 자세한 내용은 미리 쓰기 로깅에 대한 서비스 연결 역할 사용을 참조하세요.

AWS Management Console AWS CLI, 또는 API로 클러스터를 생성할 때 Amazon EMR WAL을 활성화해야 하며 인스턴스 그룹 구성을 사용해야 합니다. Amazon EMR WAL을 사용하여 클러스터를 생성하지 않은 경우 실행 중인 클러스터에서 Amazon EMR WAL을 활성화할 수 없습니다. 또한 실행 중인 클러스터에서 Amazon EMR WAL을 활성화하도록 hbase-site 구성을 편집할 수 없습니다.

루트 디렉터리에서 Amazon S3를 사용하는 클러스터에서만 Amazon EMR WAL을 활성화할 수 있습니다.

Amazon EMR 버전 7.5.0 이전에는 Amazon EMR WAL의 레코드가 4MB 이하여야 했습니다. 하지만 Amazon EMR 버전 7.5.0 이상에서는 속성를 사용하여 EMR WAL의 최대 레코드 크기를 구성할 수 있습니다emr.wal.max.payload.size. 기본값은 1GB입니다. 다음 예제에서는 최대 레코드 크기를 2GB로 설정합니다.

[
  {
    "Classification":"hbase-site",
    "Properties": {
       "emr.wal.max.payload.size": "2147483648"
    }
  }
]

Amazon S3의 동일한 HBase 루트 디렉터리에 활성 클러스터가 여러 개 있을 수 없습니다.

읽기 전용 복제본 클러스터에서 Amazon EMR WAL을 활성화할 수 없습니다.

WAL은 관리형 서비스 내 여러 가용 영역에서 복제됩니다.

WAL은 클러스터의 수명을 초과하고 다음 클러스터에 계속 사용할 수 있습니다.

시작 중에 또는 클러스터가 작동 중일 때(실행 중 상태) Amazon EMR WAL을 비활성화할 수 없습니다.

WAL 및 워크스페이스 제한에 대한 자세한 내용은 Amazon EMR 엔드포인트 및 할당량 섹션을 참조하세요.

ap-northeast-1 – 아시아 태평양(도쿄)

ap-northeast-2 – 아시아 태평양(서울)

ap-southeast-1 – 아시아 태평양(싱가포르)

ap-south-1 – 아시아 태평양(뭄바이)

ap-southeast-2 – 아시아 태평양(시드니)

eu-central-1 – 유럽(프랑크푸르트)

eu-north-1 – 유럽(스톡홀름)

eu-west-1 – 유럽(아일랜드)

sa-east-1 – 남아메리카(상파울루)

us-east-1 - 미국 동부(버지니아 북부)

us-east-2 - 미국 동부(오하이오)

us-west-2 - 미국 서부(오레곤)

us-west-2 - 미국 서부(오레곤)

af-south-1 – 아프리카(케이프타운) – Amazon EMR 버전 7.3.0 이상에서만 사용할 수 있습니다.