Archiviazione condivisa - AWS ParallelCluster

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Archiviazione condivisa

AWS ParallelCluster supporta l'utilizzo di volumi di storage condivisi Amazon EBS, FSx for ONTAP e FSx per OpenZFS, i file system di storage condivisi Amazon EFS e FSx for Lustre o File Caches. Ti consigliamo di seguire le linee guida sull'affidabilità del framework AWS ben architettato e di eseguire il backup di volumi e file system.

Scegliete un sistema di storage che soddisfi i requisiti di I/O delle applicazioni HPC. È possibile ottimizzare ogni file system in base al caso d'uso specifico. Per ulteriori informazioni, consulta la panoramica delle opzioni di archiviazione.

I volumi Amazon EBS sono collegati al nodo principale e condivisi con i nodi di elaborazione tramite NFS. Questa opzione può essere conveniente, ma le prestazioni dipendono dalle risorse del nodo principale in quanto le esigenze di storage sono scalabili. Questo può diventare un collo di bottiglia man mano che vengono aggiunti più nodi di elaborazione al cluster e la domanda di throughput aumenta.

I file system Amazon EFS si adattano al variare delle esigenze di storage. Puoi configurare questi file system per una varietà di casi d'uso. Usa i file system Amazon EFS per eseguire applicazioni parallelizzate e sensibili alla latenza sul tuo cluster.

I file system FSx for Lustre possono elaborare enormi set di dati con un throughput fino a centinaia di gigabyte al secondo, milioni di IOPS e latenze inferiori al millisecondo. Usa i file system FSx for Lustre per ambienti di elaborazione esigenti ad alte prestazioni.

InSezione SharedStorage, puoi definire lo storage esterno o AWS ParallelCluster gestito:

  • Lo storage esterno si riferisce a un volume o file system esistente gestito dall'utente. AWS ParallelCluster non crea o elimina questo spazio di archiviazione.

  • Lo storage gestito si riferisce a un volume o a un file system che AWS ParallelCluster è stato creato e può eliminare.

Archiviazione esterna

È possibile AWS ParallelCluster configurare il collegamento di storage esterno al cluster quando il cluster viene creato o aggiornato. Allo stesso modo, è possibile configurarlo per scollegare lo storage esterno dal cluster quando il cluster viene eliminato o aggiornato. I dati vengono conservati e possono essere utilizzati per l'archiviazione condivisa permanente a lungo termine al di fuori del ciclo di vita del cluster.

Nota

Le versioni AWS ParallelCluster precedenti alla 3.8 non consentono il montaggio di file system gestiti esternamente. /home A partire dalla versione 3.8, AWS ParallelCluster consente di utilizzarlo /home come punto di montaggio per un file system gestito esterno. È possibile montare un file system gestito esternamente su /home specificando /home come valore il parametro sotto. MountDirSezione SharedStorage

Amazon File Cache non è adatta all'uso come /home directory di sistema e pertanto al momento non è supportata per il montaggio/home.

Quando si specifica una /home directory sotto l'opzione di configurazione, Sezione SharedStorage l'opzione di SharedStorageTypeconfigurazione verrà sovrascritta, il che significa che verranno utilizzate al suo posto le impostazioni riportate di Sezione SharedStorage seguito.

Quando si monta un filesystem esterno /home nella directory, AWS ParallelCluster copia il /home contenuto del nodo principale sul filesystem esterno, senza sovrascrivere i file esistenti sulla memoria esterna. Ciò include il trasferimento della chiave SSH del cluster per l'utente predefinito, se non è presente nel filesystem esterno. Per ulteriori informazioni, fare riferimento a. AWS ParallelCluster considerazioni sullo storage condiviso

AWS ParallelCluster archiviazione gestita

AWS ParallelCluster per impostazione predefinita nella configurazione, lo storage gestito dipende dal ciclo di vita del cluster. Per impostazione predefinita, il parametro di SharedStorage DeletionPolicy configurazione è impostato Delete su.

Per impostazione predefinita, un file system o volume AWS ParallelCluster gestito e i relativi dati vengono eliminati se si verifica una delle seguenti condizioni.

  • Il cluster viene eliminato.

  • Si modifica la configurazione dello storage condiviso gestitoName.

  • Si rimuove lo storage condiviso gestito dalla configurazione.

Imposta su DeletionPolicy Retain per rendere persistente il file system o il volume e i dati condivisi gestiti. Si consiglia di eseguire regolarmente il backup dei dati per evitare la perdita di dati. È possibile AWS Backuputilizzarlo per gestire centralmente i backup per tutte le opzioni di archiviazione.

È possibile rimuovere la dipendenza dal ciclo di vita con le impostazioni di configurazione. Per ulteriori informazioni, consulta Converti lo storage AWS ParallelCluster gestito in storage esterno.

Per informazioni sulle quote di storage condivise, vedere. Quote per l'archiviazione condivisa

Per ulteriori informazioni sullo storage condiviso e sul passaggio a nuove AWS ParallelCluster versioni, vedereMigliori pratiche: spostare un cluster su una nuova versione AWS ParallelCluster secondaria o patch.

È possibile AWS ParallelCluster configurare il collegamento di storage esterno al cluster quando il cluster viene creato o aggiornato. Allo stesso modo, è possibile configurarlo per scollegare lo storage esterno dal cluster quando il cluster viene eliminato o aggiornato. I dati vengono conservati e possono essere utilizzati per soluzioni di storage condiviso permanenti a lungo termine indipendenti dal ciclo di vita del cluster.

Per impostazione predefinita, lo storage gestito dipende dal ciclo di vita del cluster. È possibile rimuovere la dipendenza con le impostazioni di configurazione descritte in. Converti lo storage AWS ParallelCluster gestito in storage esterno

Con impostazioni specifiche, puoi ottimizzare ciascuna delle soluzioni di archiviazione supportate per i tuoi casi d'uso.

Per le quote di archiviazione condivise, vedereQuote per l'archiviazione condivisa.

Per ulteriori informazioni sullo storage condiviso e sul passaggio a nuove AWS ParallelCluster versioni, vedereMigliori pratiche: spostare un cluster su una nuova versione AWS ParallelCluster secondaria o patch.