Importação de alterações do repositório de dados - FSx para Lustre

Importação de alterações do repositório de dados

Você pode importar alterações nos dados e nos metadados POSIX de um repositório de dados vinculado para o seu sistema de arquivos do Amazon FSx. Os metadados POSIX associados incluem propriedade, permissões e timestamps.

Para importar alterações no sistema de arquivos, use um dos métodos a seguir:

  • Configure o sistema de arquivos para importar automaticamente arquivos novos, alterados ou excluídos do seu repositório de dados vinculado. Para obter mais informações, consulte Importação automática de atualizações do bucket do S3.

  • Selecione a opção para importar metadados ao criar uma associação de repositório de dados. Isso iniciará uma tarefa de importação do repositório de dados imediatamente após a criação da associação de repositório de dados.

  • Use uma tarefa de importação de repositório de dados sob demanda. Para obter mais informações, consulte Como usar tarefas do repositório de dados para importar alterações.

As tarefas de importação automática e importação do repositório de dados podem ser executadas ao mesmo tempo.

Quando você ativa a importação automática para uma associação de repositório de dados, seu sistema de arquivos atualiza automaticamente os metadados do arquivo à medida que os objetos são criados, modificados ou excluídos no S3. Quando você seleciona a opção de importar metadados ao criar uma associação de repositório de dados, seu sistema de arquivos importa metadados para todos os objetos no repositório de dados. Quando você importa usando uma tarefa de importação de repositório de dados, seu sistema de arquivos importa apenas metadados de objetos que foram criados ou modificados desde a última importação.

O FSx para Lustre copia automaticamente o conteúdo de um arquivo do seu repositório de dados e o carrega no sistema de arquivos quando a aplicação acessa pela primeira vez o arquivo no sistema de arquivos. Essa movimentação de dados é gerenciada pelo FSx para Lustre e é transparente para as aplicações. As leituras subsequentes desses arquivos são fornecidas diretamente do sistema de arquivos com latências inferiores a um milissegundo.

Você também pode pré-carregar todo o sistema de arquivos ou um diretório dentro do sistema de arquivos. Para obter mais informações, consulte Pré-carregamento de arquivos no sistema de arquivos. Se você solicitar o pré-carregamento de vários arquivos simultaneamente, o FSx para Lustre carregará os arquivos do repositório de dados do Amazon S3 em paralelo.

O FSx para Lustre só importa objetos do S3 que tenham chaves de objeto compatíveis com POSIX. As tarefas de importação automática e importação do repositório de dados importam metadados POSIX. Para obter mais informações, consulte Suporte a metadados POSIX para repositórios de dados.

nota

O FSx para Lustre não oferece suporte à importação de metadados para links simbólicos das classes de armazenamento S3 Glacier Flexible Retrieval e S3 Glacier Deep Archive. Os metadados de objetos do S3 Glacier Flexible Retrieval ou do S3 Glacier Deep Archive que não são links simbólicos podem ser importados (ou seja, um inode é criado no sistema de arquivos do FSx para Lustre com os metadados corretos). No entanto, para ler esses dados do sistema de arquivos, você deve primeiro restaurar o objeto S3 Glacier Flexible Retrieval ou S3 Glacier Deep Archive. Não há suporte para a importação de dados de arquivos diretamente dos objetos do Amazon S3 na classe de armazenamento S3 Glacier Flexible Retrieval ou S3 Glacier Deep Archive no FSx para Lustre.