기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

의 핵심 개념 및 용어AWS Glue DataBrew

아래에서 핵심 개념 및 용어에 대한 개요를 확인할 수 있습니다AWS Glue DataBrew. 이 섹션을 읽은 후 프로젝트 생성, 데이터 세트 연결 및 작업 실행 프로세스를 안내시작하기AWS Glue DataBrew하는 섹션을 참조하세요.

Project

DataBrew의 대화형 데이터 준비 워크스페이스를 프로젝트라고 합니다. 데이터 프로젝트를 사용하여 데이터, 변환 및 예약된 프로세스와 같은 관련 항목 모음을 관리합니다. 프로젝트를 생성하는 과정에서 작업할 데이터 세트를 선택하거나 생성합니다. 다음으로 DataBrew가 실행할 일련의 지침 또는 단계인 레시피를 생성합니다. 이러한 작업은 원시 데이터를 데이터 파이프라인에서 사용할 준비가 된 형식으로 변환합니다.

데이터세트

데이터 세트는 단순히 열 또는 필드로 구분된 행 또는 레코드인 데이터 세트를 의미합니다. DataBrew 프로젝트를 생성할 때 변환하거나 준비하려는 데이터에 연결하거나 업로드합니다. DataBrew는 형식이 지정된 파일에서 가져온 모든 소스의 데이터로 작업할 수 있으며 증가하는 데이터 스토어 목록에 직접 연결됩니다.

DataBrew의 경우 데이터 세트는 데이터에 대한 읽기 전용 연결입니다. DataBrew는 데이터를 참조하기 위해 설명이 포함된 메타데이터 세트를 수집합니다. DataBrew는 실제 데이터를 변경하거나 저장할 수 없습니다. 간소화를 위해 데이터 세트를 사용하여 실제 데이터 세트와 DataBrew가 사용하는 메타데이터를 모두 참조합니다.

방법

DataBrew에서 레시피는 DataBrew가 작업할 데이터에 대한 일련의 지침 또는 단계입니다. 레시피에는 여러 단계가 포함될 수 있으며 각 단계에는 여러 작업이 포함될 수 있습니다. 도구 모음의 변환 도구를 사용하여 데이터에 적용하려는 모든 변경 사항을 설정합니다. 나중에 레시피의 완성 제품을 볼 준비가 되면이 작업을 DataBrew에 할당하고 예약합니다. DataBrew는 데이터 변환에 대한 지침을 저장하지만 실제 데이터는 저장하지 않습니다. 다른 프로젝트에서 레시피를 다운로드하여 재사용할 수 있습니다. 레시피의 여러 버전을 게시할 수도 있습니다.

작업

DataBrew는 레시피를 만들 때 설정한 지침을 실행하여 데이터를 변환하는 작업을 수행합니다. 이러한 지침을 실행하는 프로세스를 작업이라고 합니다. 작업은 사전 설정된 일정에 따라 데이터 레시피를 실행할 수 있습니다. 하지만 일정에 국한되지는 않습니다. 온디맨드로 작업을 실행할 수도 있습니다. 일부 데이터를 프로파일링하려는 경우 레시피가 필요하지 않습니다. 이 경우 프로필 작업을 설정하여 데이터 프로필을 생성할 수 있습니다.

데이터 계보

DataBrew는 시각적 인터페이스에서 데이터를 추적하여 데이터 계보라는 오리진을 결정합니다. 이 보기는 데이터가 원래 위치로부터 다른 엔터티를 통해 흐르는 방식을 보여줍니다. 오리진, 영향을 받은 다른 엔터티, 시간 경과에 따라 발생한 일, 저장된 위치를 확인할 수 있습니다.

데이터 프로필

데이터를 프로파일링하면 DataBrew는 데이터 프로파일이라는 보고서를 생성합니다. 이 요약은 콘텐츠의 컨텍스트, 데이터의 구조 및 관계를 포함하여 데이터의 기존 형태에 대해 설명합니다. 데이터 프로필 작업을 실행하여 모든 데이터 세트에 대한 데이터 프로필을 만들 수 있습니다.