Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.
Errore del cluster Amazon EMR: errore di spazio insufficiente su HDFS
Se si tenta di rimuovere un nodo principale, può verificarsi un errore di spazio insufficiente su Hadoop Distributed File System (HDFS), ma Amazon EMR non è in grado di completare l'operazione in modo sicuro a causa dello spazio insufficiente rimasto nell'HDFS. Prima che Amazon EMR rimuova un nodo principale, tutti i dati HDFS sul nodo devono essere trasferiti ad altri nodi principali per garantire la ridondanza dei dati. Tuttavia, se non c'è abbastanza spazio sugli altri nodi principali per la replica, Amazon EMR non può disattivare correttamente il nodo.
Possibili cause
Consulta quanto segue per un elenco delle possibili cause dell'errore di spazio insufficiente in HDFS:
-
Se riduci manualmente un gruppo o un parco di istanze principali quando non c'è abbastanza spazio HDFS sui nodi rimanenti per la replica dei dati prima dello scaling down.
-
Il ridimensionamento gestito o la scalabilità automatica riducono un gruppo di istanze o un parco di istanze principali quando non c'è abbastanza spazio HDFS per la replica dei dati.
-
Amazon EMR tenta di sostituire un nodo principale non integro ma non è in grado di sostituire il nodo in modo sicuro a causa dello spazio HDFS insufficiente.
Soluzioni e best practice
Per le soluzioni e le best practice, consulta quanto segue:
-
Aumenta il numero di nodi principali nel tuo cluster Amazon EMR. Se utilizzi la scalabilità gestita o la scalabilità automatica, aumenta la capacità minima dei nodi principali.
-
Usa volumi EBS più grandi per i tuoi nodi principali quando crei il tuo cluster EMR.
-
Elimina i dati HDFS non necessari nel tuo cluster EMR. Ti consigliamo di impostare CloudWatch allarmi per monitorare la
HDFSUtilizationmetrica nel tuo cluster per sapere se il tuo cluster EMR ha poco spazio.