As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.
Visão geral dos repositórios de dados
Ao usar o Amazon FSx for Lustre com repositórios de dados, você pode ingerir e processar grandes volumes de dados de arquivos em um sistema de arquivos de alto desempenho usando tarefas automáticas de importação e importação do repositório de dados. Ao mesmo tempo, você pode gravar resultados em seus repositórios de dados usando tarefas automáticas de exportação ou exportação do repositório de dados. Com esses recursos, você pode reiniciar sua workload a qualquer momento usando os dados mais recentes armazenados em seu repositório de dados.
nota
Associações de repositórios de dados, exportação automática e suporte para vários repositórios de dados não estão disponíveis nos sistemas de arquivos ou sistemas FSx de arquivos Lustre 2.10. Scratch 1
FSx for Lustre está profundamente integrado ao Amazon S3. Essa integração significa que você pode acessar facilmente os objetos armazenados em seus buckets do Amazon S3 a partir de aplicativos que montam FSx seu sistema de arquivos for Lustre. Você também pode executar suas cargas de trabalho com uso intensivo de computação nas EC2 instâncias da Amazon Nuvem AWS e exportar os resultados para o seu repositório de dados após a conclusão da carga de trabalho.
Para acessar objetos no repositório de dados do Amazon S3 como arquivos e diretórios no sistema de arquivos, os metadados de arquivos e diretórios devem ser carregados no sistema de arquivos. Você pode carregar metadados de um repositório de dados vinculado ao criar uma associação de repositório de dados.
Além disso, você pode importar metadados de arquivos e diretórios de seus repositórios de dados vinculados para o sistema de arquivos usando a importação automática ou usando uma tarefa de importação de repositório de dados. Quando você ativa a importação automática para uma associação de repositório de dados, seu sistema de arquivos importa automaticamente os metadados do arquivo à medida que os arquivos são criados, modificados e excluídos no repositório de dados do S3. Como alternativa, você poderá importar metadados de arquivos e diretórios novos ou alterados usando uma tarefa de importação de repositório de dados.
nota
As tarefas de importação automática e de importação do repositório de dados podem ser usadas simultaneamente em um sistema de arquivos.
Você também pode exportar arquivos e seus metadados associados no sistema de arquivos para o repositório de dados usando a exportação automática ou usando uma tarefa de exportação do repositório de dados. Quando você ativa a exportação automática em uma associação de repositório de dados, seu sistema de arquivos exporta automaticamente os dados e metadados do arquivo à medida que os arquivos são criados, modificados ou excluídos. Como alternativa, você pode exportar arquivos ou diretórios usando uma tarefa de exportação do repositório de dados. Quando você usa uma tarefa de exportação do repositório de dados, os dados e metadados do arquivo que foram criados ou modificados desde a última tarefa desse tipo são exportados.
nota
As tarefas de exportação automática e de exportação do repositório de dados não podem ser usadas simultaneamente em um sistema de arquivos.
As associações de repositório de dados só exportam arquivos comuns, links simbólicos e diretórios. Isso significa que todos os outros tipos de arquivos (especial FIFO, especial em bloco, especial de caracteres e soquete) não serão exportados como parte dos processos de exportação, como tarefas de exportação automática e de exportação do repositório de dados.
FSx O for Lustre também oferece suporte a cargas de trabalho intermitentes na nuvem com sistemas de arquivos locais, permitindo que você copie dados de clientes locais usando nossa VPN. AWS Direct Connect
Importante
Se você vinculou um ou mais FSx sistemas de arquivos do Lustre a um repositório de dados no Amazon S3, não exclua o bucket do Amazon S3 até que você tenha excluído ou desvinculado todos os sistemas de arquivos vinculados.
Suporte regional e de conta para buckets do S3 vinculados
Ao criar links para buckets do S3, lembre-se das seguintes limitações de suporte à região e à conta:
-
A exportação automática oferece suporte a configurações entre regiões. O sistema de FSx arquivos da Amazon e o bucket S3 vinculado podem estar localizados no mesmo Região da AWS ou em locais diferentes Regiões da AWS.
-
A importação automática não oferece suporte a configurações entre regiões. Tanto o sistema de FSx arquivos da Amazon quanto o bucket S3 vinculado devem estar localizados no mesmo Região da AWS.
-
A exportação e a importação automáticas oferecem suporte a configurações entre contas. O sistema de FSx arquivos da Amazon e o bucket S3 vinculado podem pertencer ao mesmo Conta da AWS ou a diferentes Contas da AWS.