기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

Amazon S3 대상 데이터 검증

AWS DMS는 Amazon S3 대상에서 복제된 데이터의 검증을 지원합니다. AWS DMS는 Amazon S3에 복제된 데이터를 플랫 파일로 저장하므로, Amazon Athena CREATE TABLE AS SELECT(CTAS) 쿼리를 사용하여 데이터를 검증합니다.

Amazon S3에 저장된 데이터에 대한 쿼리는 컴퓨팅 집약적입니다. 따라서 AWS DMS는 변경 데이터 캡처(CDC) 중 하루에 한 번 (00:00) UTC에 Amazon S3 데이터에 대한 검증을 실행합니다. AWS DMS가 매일 실행하는 각각의 검증을 간격 검증이라고 합니다. 간격 검증 과정에서 AWS DMS는 지난 24시간 동안 대상 Amazon S3 버킷으로 마이그레이션된 모든 변경 레코드를 검증합니다. 간격 검증의 제한 사항에 대한 자세한 내용은 S3 대상 검증 사용에 대한 제한 사항 섹션을 참조하세요.

Amazon S3 대상 검증은 Amazon Athena를 사용하므로 추가 비용이 적용됩니다. 자세한 내용은 Amazon Athena 요금을 참조하세요.

S3 대상 검증 사전 조건

S3 대상 검증을 사용하기 전에 다음과 같은 설정 및 권한을 확인합니다.

지속적 복제(CDC)를 사용하는 태스크의 경우 다음 설정을 확인하세요.

S3 대상 검증을 사용하기 위한 권한

S3 대상 검증을 위한 액세스 권한을 설정하려면 마이그레이션 작업 생성에 사용된 사용자 계정에 할당된 역할은 다음과 같은 권한 집합을 보유하고 있어야 합니다. 샘플 값을 내가 생각한 값으로 바꿉니다.

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Sid": "VisualEditor0",
            "Effect": "Allow",
            "Action": [
                "athena:StartQueryExecution",
                "athena:GetQueryExecution",
                "athena:CreateWorkGroup"
            ],
            "Resource": "arn:aws:athena:<endpoint_region_code>:<account_id>:workgroup/dms_validation_workgroup_for_task_*"
        },
        {
            "Effect": "Allow",
            "Action": [
                "glue:CreateDatabase",
                "glue:DeleteDatabase",
                "glue:GetDatabase",
                "glue:GetTables",
                "glue:CreateTable",
                "glue:DeleteTable",
                "glue:GetTable"
            ],
            "Resource": [
                "arn:aws:glue:<endpoint_region_code>:<account_id>:catalog",
                "arn:aws:glue:<endpoint_region_code>:<account_id>:database/aws_dms_s3_validation_*",
                "arn:aws:glue:<endpoint_region_code>:<account_id>:table/aws_dms_s3_validation_*/*",
                "arn:aws:glue:<endpoint_region_code>:<account_id>:userDefinedFunction/aws_dms_s3_validation_*/*"
            ]
        },
        {
            "Effect": "Allow",
            "Action": [
                "s3:GetBucketLocation",
                "s3:GetObject",
                "s3:ListBucketMultipartUploads",
                "s3:AbortMultipartUpload",
                "s3:ListMultipartUploadParts"
            ],
            "Resource": [
                "arn:aws:s3:::<bucket_name>",
                "arn:aws:s3:::<bucket_name>/*"
            ]
        }
    ]
}
            
        

S3 대상 검증 사용에 대한 제한 사항

S3 대상 검증을 사용할 때 적용되는 아래의 추가적인 제한 사항을 확인합니다. 모든 검증에 적용되는 제한 사항은 제한 사항 섹션을 참조하세요.

S3 대상 검증과 함께 검증 전용 태스크 사용

검증 전용 태스크는 마이그레이션을 실행하지 않고 마이그레이션할 데이터에 대한 검증을 실행합니다.

마이그레이션 태스크가 중지되더라도, 검증 전용 태스크는 계속 실행되므로 AWS DMS는 00:00 UTC 간격 검증 기간을 누락하지 않습니다.

Amazon S3 대상 엔드포인트에서 검증 전용 태스크를 사용할 경우 다음과 같은 제한 사항이 적용됩니다.