Tareas de repositorio de datos

Mediante las tareas de importación y exportación de repositorios de datos, puede gestionar la transferencia de datos y metadatos entre su sistema de archivos FSx for Lustre y cualquiera de sus repositorios de datos duraderos en Amazon S3.

Las tareas de repositorio de datos optimizan las transferencias de datos y metadatos entre su sistema FSx de archivos de Lustre y un repositorio de datos de S3. Una forma de hacerlo es mediante el seguimiento de los cambios entre tu sistema de FSx archivos de Amazon y su repositorio de datos enlazado. También lo hacen mediante el uso de técnicas de transferencia paralela para transferir datos a velocidades de hasta cientos de GBps. Las tareas del repositorio de datos se crean y visualizan mediante la FSx consola de Amazon AWS CLI, la y la FSx API de Amazon.

Las tareas de repositorio de datos mantienen los metadatos de la interfaz portátil del sistema operativo (POSIX) del sistema de archivos, incluidos la propiedad, los permisos y las marcas de tiempo. Como las tareas mantienen estos metadatos, puede implementar y mantener controles de acceso entre su sistema de archivos de FSx for Lustre y sus repositorios de datos vinculados.

Puede utilizar una tarea de liberación de repositorios de datos para liberar espacio en el sistema de archivos para nuevos archivos mediante la liberación de archivos exportados a Amazon S3. El contenido del archivo liberado se elimina, pero los metadatos del archivo liberado permanecen en el sistema de archivos. Los usuarios y las aplicaciones pueden seguir accediendo a un archivo liberado volviendo a leer el archivo. Cuando el usuario o la aplicación leen el archivo publicado, FSx for Lustre recupera de forma transparente el contenido del archivo de Amazon S3.

Tipos de tareas de repositorio de datos

Existen tres tipos de tareas de repositorio de datos:

Para obtener más información, consulte Creación de una tarea de repositorio de datos.