AWS Glue DataBrew프로젝트 생성 및 사용

프로젝트를 생성하려면

1. 에 로그인AWS Management Console하고 DataBrew 콘솔을 엽니다.

2. 탐색 창에서 프로젝트를 선택합니다. 그런 다음 프로젝트 생성을 선택합니다.

3. 프로젝트의 이름을 입력합니다. 그런 다음 프로젝트에 연결할 레시피를 선택합니다.

   • 처음부터 시작하는 경우 새 레시피 생성을 선택합니다. 이렇게 하면 빈 새 레시피가 생성되어 프로젝트에 연결됩니다.

   • 이 프로젝트에 사용할 이전에 게시된 레시피가 있는 경우 기존 레시피 편집을 선택합니다. 레시피가 현재 다른 프로젝트에 연결되어 있거나 레시피에 대해 정의된 작업이 있는 경우 새 프로젝트에서 사용할 수 없습니다. 레시피 찾아보기를 선택하여 사용 가능한 레시피를 확인합니다.

   • 이전에 게시된 기존 레시피가 있고 해당 단계를 가져오려는 경우 레시피에서 단계 가져오기를 선택한 다음 다음을 수행합니다.

     1. 레시피 찾아보기를 선택하여 사용 가능한 레시피를 확인합니다.

     2. 사용할 레시피의 게시된 버전을 선택합니다. 레시피에는 프로젝트 보기에서 작업하는 동안 레시피를 게시한 빈도에 따라 여러 버전이 있을 수 있습니다.

     3. 레시피 단계 보기를 선택하여 레시피의 데이터 변환을 검사합니다.

4. 레시피가 있으면 데이터 세트 선택 창에서 작업할 데이터 세트를 선택합니다.

   • 내 데이터 세트 - 이전에 생성한 데이터 세트를 선택합니다. 자세한 내용은 프로젝트 생성 단원을 참조하십시오.

   • 샘플 파일 -에서 유지 관리하는 샘플 데이터를 기반으로 새 데이터 세트를 생성합니다AWS. 이 샘플 데이터는 자체 데이터를 제공하지 않고도 DataBrew가 수행할 수 있는 작업을 탐색할 수 있는 좋은 방법입니다. 데이터 세트의 이름을 입력해야 합니다.

   • 새 데이터 세트 - 새 데이터 세트를 생성합니다. 자세한 내용은 프로젝트 생성 단원을 참조하십시오.

5. 액세스 권한에서 DataBrew가 Amazon S3 입력 위치에서 읽을 수 있도록 허용하는AWS Identity and Access Management(IAM) 역할을 선택합니다.AWS계정이 소유한 S3 위치의 경우 AwsGlueDataBrewDataAccessRole 서비스 관리형 역할을 선택할 수 있습니다. 이렇게 하면 DataBrew가 사용자가 소유한 S3 리소스에 액세스할 수 있습니다.

6. 샘플링 창에서 DataBrew가 데이터 세트에서 데이터 샘플을 빌드하는 옵션을 찾을 수 있습니다.

   유형에서 DataBrew가 데이터 세트에서 행을 가져오는 방법을 선택합니다.

   • 첫 번째 n개의 행을 사용하여 데이터 세트의 첫 번째 행을 기반으로 샘플을 생성합니다.

   • 임의 행을 사용하여 데이터 세트의 임의 행 선택을 기반으로 샘플을 생성합니다.

   • 샘플에 표시할 행 수를 선택합니다. 500, 1,000, 2,500 또는 최대 5,000개의 행까지 사용자 지정 샘플 크기를 선택합니다. 샘플 크기가 작을수록 DataBrew가 더 빠르게 변환을 수행할 수 있으므로 레시피를 개발할 때 시간을 절약할 수 있습니다. 샘플 크기가 클수록 기본 소스 데이터의 구성이 더 정확하게 반영됩니다. 그러나 프로젝트 세션 초기화 및 대화형 변환은 느립니다.

7. (선택 사항) 태그를 선택하여 데이터 세트에 태그를 연결합니다.

   태그는 사용자 정의 키와 선택적 값으로 구성된 간단한 레이블로, 용도, 소유자, 환경 또는 기타 기준으로 DataBrew 프로젝트를 더 쉽게 관리, 검색 및 필터링할 수 있습니다.

8. 설정이 원하는 대로 되면 작업 생성을 선택합니다.