本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
使用以下命令迁移到 ONTAP 的 FSx AWS DataSync
我们建议使用 AWS DataSync 在适用于 ONTAP 文件系统的 FSx 和非 ONTAP 文件系统之间传输数据,包括适用于 Lustre 的 FSx、适用于 OpenZFS 的 FSx、适用于 Windows 文件服务器的 FSx、亚马逊 EFS、亚马逊 S3 和本地文件管理器。如果您要在 FSx for ONTAP 和 NetApp ONTAP 之间传输文件,我们建议使用。 NetApp SnapMirror AWS DataSync 是一种数据传输服务,可简化、自动化和加速通过互联网或. 在自管理存储系统和 AWS 存储服务之间移动和复制数据。 Direct Connect DataSync 可以传输您的文件系统数据和元数据,例如所有权、时间戳和访问权限。
您可以使用 DataSync 在两个 FSx for ONTAP 文件系统之间传输文件,也可以使用不同的 AWS 区域 或 AWS 帐户将数据移动到文件系统。您还可以将适用于 ONTAP 文件系统的 FSx DataSync 配合使用以执行其他任务。例如,您可以执行一次性数据迁移、定期摄取分布式工作负载的数据以及按计划复制以实现数据保护与恢复。
在中 DataSync,位置是适用于 ONTAP 文件系统的 FSx 的终端节点。有关特定传输场景的信息,请参阅《AWS DataSync 用户指南》中的使用位置。
注意
如果您计划使用 All 分层策略将数据迁移至容量池层,请记住,文件元数据始终存储在 SSD 层上,且所有新用户数据都首先写入 SSD 层。当数据写入 SSD 层时,后台分层进程将开始将您的数据分层到容量池存储,但是分层进程非即时,并且会消耗网络资源。考虑到文件元数据(占用户数据大小的 3-7%),您需要调整 SSD 层的大小,作为用户数据的缓冲区,然后再将其分层到容量池存储。建议 SSD 利用率不要超过 80%。
迁移数据时,请务必使用CloudWatch 文件系统指标监控您的 SSD 层,以确保其填充速度不会超过分层过程将数据移动到容量池存储空间的速度。您还可以将 DataSync 传输限制为低于分层速率的速率,以确保固态硬盘层的利用率不超过 80%。例如,对于吞吐能力至少为 512 MBp 的文件系统,200 MBp 的限制通常会平衡数据传输和数据分层速率。
先决条件
要将数据迁移到 FSx for ONTAP 设置中,您需要满足要求的 DataSync 服务器和网络。要了解更多信息,请参阅《AWS DataSync 用户指南》 DataSync中的要求。
使用迁移文件的基本步骤 DataSync
使用将文件从源传输到目标 DataSync 涉及以下基本步骤:
-
在您的环境中下载并部署代理并激活它(如果在环境之间传输,则不需要 AWS 服务)。
-
创建源和目标位置。
-
创建 任务。
-
运行任务,将文件从源传输到目标。
有关更多信息,请参阅《AWS DataSync 用户指南》中的以下主题: