Como gerenciar desempenho de metadados - FSx para Lustre

Como gerenciar desempenho de metadados

Usando o console, a API ou a AWS Command Line Interface (AWS CLI) do Amazon FSx, você pode atualizar a configuração de metadados do seu sistema de arquivos do FSx para Lustre sem interromper seus usuários finais ou aplicações. O procedimento de atualização aumenta o número de IOPS de metadados provisionadas para seu sistema de arquivos.

nota

Você pode aumentar o desempenho de metadados somente em sistemas de arquivos do FSx para Lustre criados com o tipo de implantação Persistent_2 e uma configuração de metadados especificada.

O nível aprimorado de desempenho de metadados do seu sistema de arquivos estará disponível para uso em minutos. É possível atualizar o desempenho dos metadados a qualquer momento, desde que as solicitações de aumento do desempenho dos metadados tenham pelo menos 6 horas de intervalo. Ao escalar o desempenho de metadados, o sistema de arquivos poderá ficar indisponível por alguns minutos. As operações de arquivo emitidas pelos clientes enquanto o sistema de arquivos estiver indisponível serão repetidas de modo transparente e, eventualmente, serão concluídas com sucesso após a conclusão da escalabilidade do desempenho de metadados. Você receberá uma cobrança pelo novo aumento de desempenho de metadados depois que o aumento ficar disponível para você.

É possível acompanhar o progresso de um aumento de desempenho de metadados a qualquer momento usando o console, a CLI e a API do Amazon FSx. Para obter mais informações, consulte Monitorar atualizações de configuração de metadados.

Configuração de desempenho de metadados do Lustre

O número de IOPS de metadados provisionadas determina a taxa máxima de operações de metadados passível de atendimento pelo sistema de arquivos.

Ao criar o sistema de arquivos, você escolhe um dos dois modos de configuração de metadados, Automático ou Provisionado pelo usuário:

  • No modo Automático, o Amazon FSx provisiona e escala automaticamente o número de IOPS de metadados em seu sistema de arquivos com base na capacidade de armazenamento do sistema de arquivos.

  • No modo Provisionado pelo usuário, você especifica o número de IOPS de metadados a ser provisionado para seu sistema.

É possível alternar do modo Automático para o modo Provisionado pelo usuário a qualquer momento. Você também pode alternar do modo Provisionado pelo usuário para o modo Automático se o número de IOPS de metadados provisionadas em seu sistema de arquivos corresponder ao número padrão de IOPS de metadados provisionadas no modo Automático.

Os valores válidos de IOPS de metadados são 1.500, 3.000, 6.000, 12.000 e múltiplos de 12.000, até um máximo de 192.000. Cada valor de 12.000 IOPS de metadados exige um endereço IP na sub-rede em que seu sistema de arquivos reside.

O número padrão de IOPS de metadados provisionadas no modo Automático dependerá da capacidade do seu sistema de arquivos. Consulte esta tabela para obter informações sobre o número padrão de IOPS de metadados que são provisionadas com base na capacidade de armazenamento do sistema de arquivos.

Se o desempenho de metadados de sua workload exceder o número de IOPS de metadados provisionadas no modo Automático, você poderá usar o modo provisionado pelo usuário para aumentar o valor de IOPS de metadados para seu sistema de arquivos.

É possível visualizar o valor atual da configuração do servidor de metadados do sistema de arquivos da seguinte forma:

  • Usando o console: no painel Resumo da página de detalhes do sistema de arquivos, o campo IOPS de metadados mostra o valor atual das IOPS de metadados provisionadas e o modo de configuração de metadados atual (Automático ou Provisionado pelo usuário) do sistema de arquivos.

  • Ao usar a CLI ou a API: use o comando describe-file-systems da CLI ou a operação de API DescribeFileSystems e procure pela propriedade MetadataConfiguration.

Considerações ao aumentar o desempenho de metadados

Aqui estão algumas considerações importantes ao aumentar o desempenho de metadados:

  • Somente aumento no desempenho de metadados: você só pode aumentar o número de IOPS de metadados para um sistema de arquivos, não sendo possível diminuir o número de IOPS de metadados.

  • Não é possível especificar as IOPS de metadados no modo Automático: você não pode especificar o número de IOPS de metadados em um sistema de arquivos que esteja no modo Automático. Você precisará alternar para o modo Provisionado pelo usuário e, em seguida, fazer a solicitação. Para obter mais informações, consulte Como alterar o modo de configuração de metadados.

  • Tempo entre os aumentos: não é possível fazer mais aumentos do desempenho de metadados em um sistema de arquivos até 6 horas após a solicitação do último aumento.

  • Aumentos simultâneos do desempenho de metadados e do armazenamento SSD: você não pode escalar o desempenho de metadados e a capacidade de armazenamento do sistema de arquivos simultaneamente.

Quando aumentar desempenho de metadados

Aumente o número de IOPS de metadados quando precisar executar workloads que exijam níveis mais altos de desempenho de metadados do que o nível provisionado por padrão em seu sistema de arquivos. Você pode monitorar o desempenho dos metadados no AWS Management Console usando o gráfico Metadata IOPS Utilization que apresenta a porcentagem do desempenho do servidor de metadados provisionado que você está consumindo no seu sistema de arquivos.

Também é possível monitorar o desempenho dos metadados usando métricas mais granulares do CloudWatch. As métricas do CloudWatch incluem DiskReadOperations e DiskWriteOperations, que fornecem o volume de operações do servidor de metadados que exigem E/S de disco, bem como métricas granulares para operações de metadados, incluindo criação de arquivos e diretórios, estatísticas, leituras e exclusões. Para obter mais informações, consulte Métricas de metadados do FSx para Lustre.