Compare os volumes da Amazon EBS

Você pode testar o desempenho dos EBS volumes da Amazon simulando cargas de trabalho de E/S. O processo é o seguinte:

Configurar a instância

Para obter o desempenho ideal dos EBS volumes, recomendamos que você use uma instância EBS -optimizada. EBS-instâncias otimizadas oferecem taxa de transferência dedicada entre a Amazon e a EC2 AmazonEBS, com instância. EBS-instâncias otimizadas oferecem largura de banda dedicada entre a EC2 Amazon e a AmazonEBS, com especificações dependendo do tipo de instância.

Para criar uma instância EBS otimizada, escolha Launch como instância EBS otimizada ao iniciar a instância usando o EC2 console da Amazon ou especifique --ebs-optimized ao usar a linha de comando. Certifique-se de selecionar um tipo de instância que ofereça suporte a essa opção.

Configurar volumes provisionados IOPS SSD ou de uso geral SSD

Para criar volumes provisionados IOPS SSD (io1eio2) ou de uso geral SSD (gp2egp3) usando o EC2 console da Amazon, para o tipo de volume, escolha Provisionado IOPS SSD (io1), Provisionado (io2), Uso geral IOPSSSD(gp2) ou Uso geral SSD (gp3). SSD Na linha de comando, especifique io1, io2, gp2 ou gp3 para o parâmetro --volume-type. Para io1io2, e gp3 volumes, especifique o número de operações de E/S por segundo (IOPS) para o --iops parâmetro. Para ter mais informações, consulte Tipos de EBS volume da Amazon e Crie um EBS volume da Amazon.

(Somente instâncias Linux) Para os testes de exemplo, recomendamos que você crie uma matriz RAID 0 com 6 volumes, que ofereça um alto nível de desempenho. Como você é cobrado por gigabytes provisionados (e pelo número de volumes provisionados IOPS para volumes io1, io2 e gp3), não pelo número de volumes, não há custo adicional para criar vários volumes menores e usá-los para criar um conjunto de faixas. Se você estiver usando o Oracle Orion para comparar seus volumes, ele pode simular o striping da mesma forma que o Oracle, então recomendamos que você deixe ASM o Orion fazer o striping. Se você estiver usando uma ferramenta de comparação diferente, precisará fazer o stripe de volumes por conta própria.

Para obter mais informações sobre como criar uma matriz RAID 0, consulteCriar uma matriz RAID 0.

Configurar volumes com taxa de transferência otimizada HDD (st1) ou fria HDD (sc1)

Para criar um st1 volume, escolha Throughput Optimized HDD ao criar o volume usando o EC2 console da Amazon ou especifique --type st1 ao usar a linha de comando. Para criar um sc1 volume, escolha Cold HDD ao criar o volume usando o EC2 console da Amazon ou especifique --type sc1 ao usar a linha de comando. Para obter informações sobre a criação de EBS volumes, consulteCrie um EBS volume da Amazon. Para obter informações sobre como anexar esses volumes à sua instância, consulte Anexar um EBS volume da Amazon a uma EC2 instância da Amazon.

(somente instâncias Linux) AWS fornece um JSON modelo para uso AWS CloudFormation que simplifica esse procedimento de configuração. Acesse o modelo e salve-o como um JSON arquivo. AWS CloudFormation permite que você configure suas próprias SSH chaves e oferece uma maneira mais fácil de configurar um ambiente de teste de desempenho para avaliar st1 volumes. O modelo cria uma instância de geração atual e um volume st1 de 2 TiB e anexa o volume à instância em /dev/xvdf.

Instalar ferramentas de comparação

As tabelas a seguir listam algumas das ferramentas possíveis que você pode usar para avaliar o desempenho dos EBS volumes.

$ sudo yum install -y fio

sudo apt-get install -y fio

Essas ferramentas de avaliação oferecem suporte a uma ampla variedade de parâmetros de teste. Use os comandos que aproximam workloads às quais seus volumes oferecerão suporte. Os comandos fornecidos abaixo servem como exemplos para ajudá-lo a começar a usar.

Escolha o comprimento da fila de volume

Escolha do melhor comprimento da fila de volume com base em sua workload e tipo de volume.

Tamanho da fila em volumes SSD suportados

Para determinar o tamanho ideal da fila para sua carga de trabalho em volumes SSD suportados, recomendamos que você tenha como meta um tamanho de fila de 1 para cada 1.000 IOPS disponíveis (linha de base para volumes de uso geral e a quantidade provisionada para SSD volumes provisionados). IOPS SSD Depois, é possível monitorar a performance de sua aplicação e ajustar esse valor com base nos requisitos da aplicação.

Aumentar o tamanho da fila é benéfico até que você alcance o valor provisionadoIOPS, de taxa de transferência ou de tamanho ideal da fila do sistema, atualmente definido como 32. Por exemplo, um volume com 3.000 provisionados IOPS deve ter como alvo um tamanho de fila de 3. É necessário experimentar ajustar esses valores para cima ou para baixo para ver qual funciona melhor para sua aplicação.

Tamanho da fila em volumes HDD suportados

Para determinar o tamanho ideal da fila para sua carga de trabalho em volumes HDD suportados, recomendamos que você tenha como meta um tamanho de fila de pelo menos 4 enquanto executa E/S sequenciais de 1 MiB. Depois, é possível monitorar a performance de sua aplicação e ajustar esse valor com base nos requisitos da aplicação. Por exemplo, um st1 volume de 2 TiB com taxa de transferência de pico de 500, respectivamente. MiB/s and IOPS of 500 should target a queue length of 4, 8, or 16 while performing 1,024 KiB, 512 KiB, or 256 KiB sequential I/Os É necessário experimentar ajustar esses valores para cima ou para baixo e ver qual funciona melhor com sua aplicação.

Desabilitar estados C

Antes de executar a referência, desative os estados C do processador. Os núcleos temporariamente ociosos em um suporte CPU podem entrar no estado C para economizar energia. Quando o núcleo é chamado para retomar o processamento, leva um determinado tempo até o núcleo voltar a funcionar por completo. Esta latência pode interferir nas rotinas de comparação do processador. Para obter mais informações sobre os estados C e quais tipos de EC2 instância os suportam, consulte Controle de estado do processador para sua EC2 instância.

Benchmarking de performance

Os procedimentos a seguir descrevem os comandos de benchmarking para vários tipos de EBS volume.

Execute os comandos a seguir em uma instância EBS otimizada com EBS volumes anexados. Se os EBS volumes foram criados a partir de instantâneos, certifique-se de inicializá-los antes do benchmarking. Para obter mais informações, consulte Inicializar volumes da Amazon EBS.

Após terminar de testar seus volumes, consulte os seguintes tópicos para obter ajuda para limpar: Excluir um EBS volume da Amazon e Encerrar a instância.

Compare volumes provisionados IOPS SSD e de uso geral SSD

$ sudo fio --directory=/mnt/p_iops_vol0 --ioengine=psync --name fio_test_file --direct=1 --rw=randwrite --bs=16k --size=1G --numjobs=16 --time_based --runtime=180 --group_reporting --norandommap

$ sudo fio --directory=/mnt/p_iops_vol0 --name fio_test_file --direct=1 --rw=randread --bs=16k --size=1G --numjobs=16 --time_based --runtime=180 --group_reporting --norandommap 

diskspd -b8K -d30 -o4 -t8 -h -r -w25 -L -Z1G -c20G C:\iotest.dat > DiskSpeedResults.txt

Benchmark de volumes st1 e sc1 (instâncias do Linux)

Execute fio em seu volume do st1 ou sc1.

O seguinte comando executa operações de leitura sequenciais de 1 MiB em um dispositivo de blocos st1 anexado (por exemplo, /dev/xvdf):

$ sudo fio --filename=/dev/<device> --direct=1 --rw=read --randrepeat=0 --ioengine=libaio --bs=1024k --iodepth=8 --time_based=1 --runtime=180 --name=fio_direct_read_test

O seguinte comando executa operações de gravação sequenciais de 1 MiB em um dispositivo de blocos st1 anexado:

$ sudo fio --filename=/dev/<device> --direct=1 --rw=write --randrepeat=0 --ioengine=libaio --bs=1024k --iodepth=8 --time_based=1 --runtime=180 --name=fio_direct_write_test 

Algumas workloads executam uma combinação de leituras e gravações sequenciais para diferentes partes de dispositivo de blocos. Para comparar essa workload, recomendamos que você use trabalhos de fio separados, simultâneos, para leituras e gravações, e use a opção fio offset_increment para focar em locais diferentes de dispositivo de blocos para cada trabalho.

Executar essa workload é um pouco mais complicado do que uma workload de gravação ou leitura sequenciais. Use um editor de texto para criar um arquivo de trabalho de fio, chamado de fio_rw_mix.cfg neste exemplo, que contém o seguinte:

[global] 
clocksource=clock_gettime
randrepeat=0
runtime=180
 
[sequential-write]
bs=1M
ioengine=libaio
direct=1
iodepth=8
filename=/dev/<device>
do_verify=0
rw=write
rwmixread=0
rwmixwrite=100 

[sequential-read] 
bs=1M
ioengine=libaio
direct=1
iodepth=8
filename=/dev/<device>
do_verify=0
rw=read
rwmixread=100
rwmixwrite=0
offset=100g

Em seguida, execute o seguinte comando:

$ sudo fio fio_rw_mix.cfg

Para obter mais informações sobre como interpretar os resultados, consulte este tutorial: Inspeção de performance de E/S de disco com fio.

Vários trabalhos de fio para E/S direta, mesmo que usando operações de leitura ou gravação sequenciais, podem resultar em uma throughput mais baixa do que o esperado para volumes st1 e sc1. Recomendamos que você use um trabalho direto de E/S e use o parâmetro iodepth para controlar o número de operações simultâneas de E/S.