Analysez les EBS volumes Amazon

Vous pouvez tester les performances des EBS volumes Amazon en simulant les charges de travail d'E/S. Procédez comme suit :

Configurer votre instance

Pour optimiser les performances des EBS volumes, nous vous recommandons d'utiliser une instance EBS optimisée. EBS-les instances optimisées fournissent un débit dédié entre Amazon et EC2 AmazonEBS, avec instance. EBS-les instances optimisées fournissent une bande passante dédiée entre Amazon EC2 et AmazonEBS, les spécifications dépendant du type d'instance.

Pour créer une instance EBS optimisée, choisissez Launch en tant qu'instance EBS optimisée lorsque vous lancez l'instance à l'aide de la EC2 console Amazon, ou spécifiez-le --ebs-optimized lorsque vous utilisez la ligne de commande. Assurez-vous de sélectionner un type d'instance compatible avec cette option.

Configuration de volumes provisionnés IOPS SSD ou à usage SSD général

Pour créer des volumes provisionnés IOPS SSD (io1etio2) ou à usage général SSD (gp2etgp3) à l'aide de la EC2 console Amazon, pour le type de volume, choisissez Provisioned IOPS SSD (io1), Provisioned IOPS SSD (io2), General Purpose (gp2) ou General Purpose SSD (gp3). SSD Sur la ligne de commande, spécifiez io1, io2, gp2 ou gp3 pour le paramètre --volume-type. Pour les gp3 volumes io1io2, spécifiez le nombre d'opérations d'E/S par seconde (IOPS) pour le --iops paramètre. Pour plus d’informations, consultez Types de EBS volumes Amazon et Création d'un EBS volume Amazon.

(Instances Linux uniquement) Pour les exemples de tests, nous vous recommandons de créer une matrice RAID 0 avec 6 volumes, ce qui offre un haut niveau de performance. Comme vous êtes facturé en gigaoctets provisionnés (et en fonction du nombre de gigaoctets provisionnés IOPS pour les volumes io1, io2 et gp3), et non du nombre de volumes, la création de plusieurs volumes plus petits et leur utilisation pour créer un ensemble de bandes n'entraînent aucun coût supplémentaire. Si vous utilisez Oracle Orion pour comparer vos volumes, il peut simuler le découpage de la même manière qu'OracleASM. Nous vous recommandons donc de laisser Orion effectuer le découpage. Si vous utilisez un outil de comparaison différent, vous devez effectuer vous-même l’agrégation des volumes par bandes.

Pour plus d'informations sur la création d'un tableau RAID 0, consultezCréation d'un tableau RAID 0.

Configuration de volumes optimisés pour le débit HDD (st1) ou de volumes froids HDD (sc1)

Pour créer un st1 volume, choisissez Throughput Optimized HDD lors de la création du volume à l'aide de la EC2 console Amazon, ou spécifiez-le --type st1 lorsque vous utilisez la ligne de commande. Pour créer un sc1 volume, choisissez Cold HDD lorsque vous créez le volume à l'aide de la EC2 console Amazon, ou spécifiez-le --type sc1 lorsque vous utilisez la ligne de commande. Pour plus d'informations sur la création de EBS volumes, consultezCréation d'un EBS volume Amazon. Pour plus d’informations sur la liaison de ces volumes à votre instance, consultez Associer un EBS volume Amazon à une EC2 instance Amazon.

(instances Linux uniquement) AWS fournit un JSON modèle à utiliser AWS CloudFormation qui simplifie cette procédure de configuration. Accédez au modèle et enregistrez-le sous forme de JSON fichier. AWS CloudFormation vous permet de configurer vos propres SSH clés et de configurer plus facilement un environnement de test de performance pour évaluer les st1 volumes. Le modèle crée une instance de la génération actuelle et un volume st1 de 2 Tio, et attache ce dernier à l’instance dans /dev/xvdf.

Installer les outils d’évaluation

Les tableaux suivants répertorient certains des outils que vous pouvez utiliser pour comparer les performances des EBS volumes.

$ sudo yum install -y fio

sudo apt-get install -y fio

Ces outils de comparaison prennent en charge un large éventail de paramètres de test. Vous devez utiliser des commandes proches des charges de travail que vos volumes devront prendre en charge. Les commandes ci-dessous sont proposées à titre d’exemple pour vous permettre de débuter.

Choisir la longueur de la file d’attente d’un volume

Choisissez la meilleure longueur de file d’attente du volume en fonction de votre charge de travail et du type de volume.

Longueur de file d'attente sur les SSD volumes sauvegardés

Pour déterminer la longueur de file d'attente optimale pour votre charge de travail sur les volumes SSD sauvegardés, nous vous recommandons de cibler une longueur de file d'attente de 1 pour 1 000 IOPS disponibles (valeur de référence pour les SSD volumes à usage général et quantité provisionnée pour les volumes provisionnés IOPSSSD). Vous pouvez ensuite contrôler les performances de votre application et ajuster cette valeur en fonction des exigences de votre application.

L'augmentation de la longueur de la file d'attente est bénéfique jusqu'à ce que vous atteigniez la valeur provisionnéeIOPS, le débit ou la valeur de longueur de file d'attente système optimale, qui est actuellement définie sur 32. Par exemple, un volume dont 3 000 sont provisionnés IOPS doit viser une longueur de file d'attente de 3. Vous devez essayer d’augmenter ou de diminuer ces valeurs afin de déterminer ce qui fonctionne le mieux pour votre application.

Longueur de file d'attente sur les HDD volumes sauvegardés

Pour déterminer la longueur de file d'attente optimale pour votre charge de travail sur les volumes HDD sauvegardés, nous vous recommandons de cibler une longueur de file d'au moins 4 lors de l'exécution d'E/S séquentielles de 1 Mo. Vous pouvez ensuite contrôler les performances de votre application et ajuster cette valeur en fonction des exigences de votre application. Par exemple, un st1 volume de 2 TiB avec un débit en rafale de 500 respectivement. MiB/s and IOPS of 500 should target a queue length of 4, 8, or 16 while performing 1,024 KiB, 512 KiB, or 256 KiB sequential I/Os Vous devez essayer d’augmenter ou de diminuer ces valeurs afin de déterminer ce qui fonctionne le mieux pour votre application.

Désactivation des états « C-state »

Avant de procéder à des comparaisons, vous devez désactiver les états « C-state » du processeur. Les cœurs temporairement inactifs dans un environnement compatible CPU peuvent passer à l'état C pour économiser de l'énergie. Lorsque le cœur est appelé afin de reprendre le traitement, un certain laps de temps est nécessaire avant que le cœur soit à nouveau entièrement opérationnel. Cette latence peut interférer avec les routines de comparaison du processeur. Pour plus d'informations sur les états C et les types d'EC2instances qui les prennent en charge, consultez la section Contrôle de l'état du processeur pour votre EC2 instance.

Effectuer la comparaison

Les procédures suivantes décrivent les commandes d'analyse comparative pour différents types de EBS volumes.

Exécutez les commandes suivantes sur une instance EBS optimisée avec des EBS volumes attachés. Si les EBS volumes ont été créés à partir de snapshots, veillez à les initialiser avant de procéder à l'analyse comparative. Pour de plus amples informations, veuillez consulter Initialisation des volumes Amazon EBS.

Lorsque vous avez terminé de tester vos volumes, consultez les rubriques suivantes pour obtenir de l'aide sur le nettoyage : Supprimer un EBS volume Amazon et Mettez fin à votre instance.

Comparaison des volumes provisionnés IOPS SSD et à usage SSD général

$ sudo fio --directory=/mnt/p_iops_vol0 --ioengine=psync --name fio_test_file --direct=1 --rw=randwrite --bs=16k --size=1G --numjobs=16 --time_based --runtime=180 --group_reporting --norandommap

$ sudo fio --directory=/mnt/p_iops_vol0 --name fio_test_file --direct=1 --rw=randread --bs=16k --size=1G --numjobs=16 --time_based --runtime=180 --group_reporting --norandommap 

diskspd -b8K -d30 -o4 -t8 -h -r -w25 -L -Z1G -c20G C:\iotest.dat > DiskSpeedResults.txt

Benchmark st1 et sc1 volumes (instances Linux)

Exécutez la commande fio sur votre volume st1 ou sc1.

La commande suivante exécute des opérations de lecture séquentielle d’1 Mio sur un périphérique de stockage en mode bloc st1 attaché (par exemple, /dev/xvdf) :

$ sudo fio --filename=/dev/<device> --direct=1 --rw=read --randrepeat=0 --ioengine=libaio --bs=1024k --iodepth=8 --time_based=1 --runtime=180 --name=fio_direct_read_test

La commande suivante exécute des opérations d’écriture séquentielle d’1 Mio sur un périphérique de stockage en mode bloc st1 attaché :

$ sudo fio --filename=/dev/<device> --direct=1 --rw=write --randrepeat=0 --ioengine=libaio --bs=1024k --iodepth=8 --time_based=1 --runtime=180 --name=fio_direct_write_test 

Certaines charges de travail exécutent une combinaison de lectures séquentielles et d’écritures séquentielles dans différentes parties du périphérique de stockage en mode bloc. Pour évaluer une telle charge de travail, nous vous recommandons d’utiliser des tâches fio distinctes et simultanées pour les lectures et les écritures, et d’utiliser l’option fio offset_increment pour cibler différents emplacements du périphérique de stockage en mode bloc pour chaque tâche.

L’exécution de cette charge de travail est un peu plus compliquée qu’une charge de travail d’écriture séquentielle ou de lecture séquentielle. Utilisez un éditeur de texte pour créer un fichier de tâche fio, appelé fio_rw_mix.cfg dans cet exemple, contenant les éléments suivants :

[global] 
clocksource=clock_gettime
randrepeat=0
runtime=180
 
[sequential-write]
bs=1M
ioengine=libaio
direct=1
iodepth=8
filename=/dev/<device>
do_verify=0
rw=write
rwmixread=0
rwmixwrite=100 

[sequential-read] 
bs=1M
ioengine=libaio
direct=1
iodepth=8
filename=/dev/<device>
do_verify=0
rw=read
rwmixread=100
rwmixwrite=0
offset=100g

Ensuite, exécutez la commande suivante :

$ sudo fio fio_rw_mix.cfg

Pour plus d’informations sur l’interprétation des résultats, consultez le didacticiel Inspecting disk I/O performance with fio.

Plusieurs tâches fio pour l’I/O directe, même en cas d’utilisation d’opérations de lecture ou d’écriture séquentielle, peuvent se traduire par un débit inférieur à celui attendu pour les volumes st1 et sc1. Nous vous recommandons d’utiliser une tâche d’I/O directe et le paramètre iodepth pour contrôler le nombre d’opérations d’I/O simultanées.