数据存储库概览 - FSx为了光泽

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

数据存储库概览

当您将 Amazon FSx for Lustre 与数据存储库配合使用时,您可以使用自动导入和导入数据存储库任务在高性能文件系统中摄取和处理大量文件数据。同时,您可以通过自动导出或导出数据存储库任务,将结果写入您的数据存储库。借助这些功能,您可以使用您的数据存储库中存储的最新数据,随时重新启动工作负载。

注意

Lustre 2.10 文件系统或Scratch 1文件系统不支持数据存储库关联、自动导出和FSx对多个数据存储库的支持。

FSxfor Lustre 已与 Amazon S3 深度集成。这种集成意味着您可以通过挂载 for Lustre 文件系统的应用程序无缝访问存储在 Amazon S3 存储桶中的对象。FSx您还可以在中的 Amazon EC2 实例上运行计算密集型工作负载, AWS Cloud 并在工作负载完成后将结果导出到您的数据存储库。

要以文件系统上文件和目录的形式访问 Amazon S3 数据存储库中的对象,文件和目录元数据必须加载到文件系统中。创建数据存储库关联时,您可以从链接的数据存储库加载元数据。

此外,您还可以通过自动导入或导入数据存储库任务,将文件和目录元数据从链接的数据存储库导入文件系统。为数据存储库关联启用自动导入后,当您在 S3 数据存储库中创建、修改和/或删除文件时,您的文件系统会自动导入文件元数据。或者,您可以通过导入数据存储库任务为新的或已更改的文件和目录导入元数据。

注意

自动导入和导入数据存储库任务可以在文件系统上同时使用。

您还可以通过自动导出或导出数据存储库任务,将您的文件系统中的文件及其关联元数据导出到您的数据存储库。为数据存储库关联启用自动导出后,当您创建、修改或删除文件时,您的文件系统会自动导出文件数据和元数据。或者,您可以通过导出数据存储库任务来导出文件或目录。当您使用导出数据存储库任务时,系统会导出自上次执行此类任务以来创建或修改的文件数据和元数据。

注意
  • 自动导出和导出数据存储库任务不能在文件系统上同时使用。

  • 数据存储库关联仅导出常规文件、符号链接和目录。这意味着所有其他类型的文件(FIFO特殊文件、特殊区块文件、特殊字符文件和套接字文件)都不会作为自动导出和导出数据存储库任务等导出过程的一部分进行导出。

FSxfor Lustre 还允许您使用 AWS Direct Connect 或从本地客户端复制数据,从而支持本地文件系统的云爆发工作负载。VPN

重要

如果您已将一个或多FSx个 Lustre 文件系统链接到 Amazon S3 上的数据存储库,则在删除或取消链接所有链接的文件系统之前,请不要删除 Amazon S3 存储桶。

针对链接的 S3 桶的区域和账户支持

当您创建指向 S3 桶的链接时,请记住以下区域和账户支持限制:

  • 自动导出支持跨区域配置。Amazon FSx 文件系统和链接的 S3 存储桶可以位于相同 AWS 区域 或不同位置 AWS 区域。

  • 自动导入不支持跨区域配置。Amazon FSx 文件系统和链接的 S3 存储桶必须位于同一个存储桶中 AWS 区域。

  • 自动导出和自动导入都支持跨账户配置。Amazon FSx 文件系统和关联的 S3 存储桶可以属于相同 AWS 账户 或不同 AWS 账户。