데이터 리포지토리 작업 - FSx for Lustre

데이터 리포지토리 작업

데이터 리포지토리 가져오기 및 내보내기 작업을 사용하면 FSx for Lustre 파일 시스템과 Amazon S3의 내구성이 뛰어난 데이터 리포지토리 간에 데이터 및 메타데이터 전송을 관리할 수 있습니다.

데이터 리포지토리 작업은 FSx for Lustre 파일 시스템과 S3의 데이터 리포지토리 간의 데이터 및 메타데이터 전송을 최적화합니다. 이를 수행하는 한 가지 방법은 Amazon FSx 파일 시스템과 연결된 데이터 리포지토리 간의 변경 사항을 추적하는 것입니다. 또한 병렬 전송 기술을 사용하여 최대 수백 GB/s의 속도로 데이터를 전송합니다. Amazon FSx 콘솔, AWS CLI 및 Amazon FSx API를 사용하여 데이터 리포지토리 작업을 생성하고 볼 수 있습니다.

데이터 리포지토리 작업은 소유권, 권한, 타임스탬프를 비롯한 파일 시스템의 이동식 운영 체제 인터페이스(POSIX) 메타데이터를 유지 관리합니다. 작업에서 이 메타데이터를 유지 관리하므로 FSx for Lustre 파일 시스템과 연결된 데이터 리포지토리 간에 액세스 제어를 구현하고 유지할 수 있습니다.

데이터 리포지토리 릴리스 작업을 사용하면 Amazon S3로 내보낸 파일을 릴리스하여 새 파일을 위한 파일 시스템 공간을 확보할 수 있습니다. 릴리스된 파일의 콘텐츠는 제거되지만 릴리스된 파일의 메타데이터는 파일 시스템에 남아 있습니다. 사용자와 애플리케이션은 파일을 다시 읽어서 릴리스된 파일에 계속 액세스할 수 있습니다. 사용자 또는 애플리케이션이 릴리스된 파일을 읽으면 FSx for Lustre는 Amazon S3에서 파일 콘텐츠를 투명하게 검색합니다.

데이터 리포지토리 작업 유형

데이터 리포지토리 작업에는 다음과 같은 세 가지 유형이 있습니다:

  • 내보내기 데이터 리포지토리 작업이 Lustre 파일 시스템에서 링크된 S3 버킷으로 내보냅니다.

  • 가져오기 데이터 리포지토리 작업이 연결된 S3 버킷에서 Lustre 파일 시스템으로 가져옵니다.

  • 릴리스 데이터 리포지토리 작업이 Lustre 파일 시스템에서 링크된 S3 버킷으로 내보낸 파일을 릴리스합니다.

자세한 내용은 데이터 리포지토리 작업 생성 섹션을 참조하세요.