Création d'une AWS ParallelCluster AMI personnalisée - AWS ParallelCluster
Comment personnaliser l' AWS ParallelCluster AMIModification d’une AMI Création d'une AWS ParallelCluster AMI personnaliséeUtilisation d'une AMI personnalisée lors de l'exécution

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Création d'une AWS ParallelCluster AMI personnalisée

Important

Nous ne recommandons pas de créer une AMI personnalisée comme approche de personnalisation AWS ParallelCluster.

En effet, une fois que vous avez créé votre propre AMI, vous ne recevrez plus de mises à jour ni de corrections de bogues dans les futures versions de AWS ParallelCluster. De plus, si vous créez une AMI personnalisée, vous devez répéter les étapes que vous avez utilisées pour créer votre AMI personnalisée à chaque nouvelle AWS ParallelCluster version.

Avant de poursuivre votre lecture, nous vous recommandons de consulter la section Actions Bootstrap personnalisées pour déterminer si les modifications que vous souhaitez apporter peuvent être scriptées et prises en charge dans les futures AWS ParallelCluster versions.

Même si la création d'une AMI personnalisée n'est pas idéale (pour les raisons mentionnées précédemment), il existe toujours des scénarios dans lesquels il AWS ParallelCluster est nécessaire de créer une AMI personnalisée pour. Ce didacticiel vous guide tout au long du processus de création d'une AMI personnalisée pour ces scénarios.

Note

À partir de AWS ParallelCluster la version 2.6.1, la plupart des recettes d'installation sont ignorées par défaut lors du lancement des nœuds. Cela permet d'améliorer les temps de démarrage. Pour exécuter toutes les recettes d'installation afin d'améliorer la rétrocompatibilité au détriment des temps de démarrage, ajoutez "skip_install_recipes" : "no" la cluster clé dans le extra_json paramètre. Par exemple :

extra_json = { "cluster" : { "skip_install_recipes" : "no" } }
Prérequis

Comment personnaliser l' AWS ParallelCluster AMI

Il existe trois manières d'utiliser une AWS ParallelCluster AMI personnalisée décrites dans les sections suivantes. Deux de ces trois méthodes nécessitent que vous créiez une nouvelle AMI disponible sous votre nom Compte AWS. La troisième méthode (utiliser une AMI personnalisée au moment de l'exécution) ne vous oblige pas à créer quoi que ce soit à l'avance, mais elle ajoute des risques au déploiement. Choisissez la méthode qui répond le mieux à vos besoins.

Modification d’une AMI

Il s'agit de la méthode la plus sûre et la plus recommandée. Comme l' AWS ParallelCluster AMI de base est souvent mise à jour avec les nouvelles versions, elle possède tous les composants nécessaires AWS ParallelCluster pour fonctionner lors de son installation et de sa configuration. Vous pouvez démarrer avec cette base.

New EC2 console

  1. Dans la liste des AWS ParallelCluster AMI, recherchez l'AMI correspondant à l'AMI spécifique Région AWS que vous utilisez. La liste d'AMI que vous choisissez doit correspondre à la version AWS ParallelCluster que vous utilisez. Exécutez pcluster version pour vérifier la version. Pour AWS ParallelCluster la version 2.11.9, accédez à https://github.com/aws/aws- parallelcluster/blob/v2.11.9/amis .txt. Pour sélectionner une autre version, utilisez le même lien, cliquez sur le bouton Tag : 2.11.9, sélectionnez l'onglet Tags, puis sélectionnez la version appropriée.

  2. Connectez-vous à la EC2 console Amazon AWS Management Console et ouvrez-la à l'adresse https://console.aws.amazon.com/ec2/.

  3. Dans le tableau de EC2 bord Amazon, choisissez Launch instance.

  4. Dans Images de l'application et du système d'exploitation, choisissez Parcourir davantage AMIs, accédez à Communauté AMIs et entrez l'ID AWS ParallelCluster AMI correspondant à votre identifiant AMI Région AWS dans le champ de recherche.

  5. Sélectionnez l'AMI, choisissez le type et les propriétés de votre instance, sélectionnez votre paire de clés et lancez l'instance.

  6. Connectez-vous à votre instance à l'aide de l'utilisateur du système d'exploitation et de votre clé SSH. Pour plus d'informations, accédez à Instances, sélectionnez la nouvelle instance et Connect.

  7. Personnalisez votre instance selon vos besoins.

  8. Exécutez la commande suivante pour préparer votre instance pour la création d'une AMI :

    sudo /usr/local/sbin/ami_cleanup.sh

  9. Accédez à Instances, choisissez la nouvelle instance, sélectionnez État de l'instance et Arrêtez l'instance.

  10. Créez une nouvelle AMI à partir de l'instance à l'aide de la EC2 console ou de la commande AWS CLI create-image.

    Depuis la EC2 console

    1. Choisissez Instances dans le volet de navigation.

    2. Choisissez l'instance que vous avez créée et modifiée.

    3. Dans Actions, sélectionnez Image et modèles, puis Créer une image.

    4. Choisissez Créer une image.

  11. Entrez le nouvel identifiant d'AMI dans le champ custom_ami de la configuration de votre cluster.

Old EC2 console

  1. Dans la liste des AWS ParallelCluster AMI, recherchez l'AMI correspondant à l'AMI spécifique Région AWS que vous utilisez. La liste d'AMI que vous choisissez doit correspondre à la version AWS ParallelCluster que vous utilisez. Exécutez pcluster version pour vérifier la version. Pour AWS ParallelCluster la version 2.11.9, accédez à https://github.com/aws/aws- parallelcluster/blob/v2.11.9/amis .txt. Pour sélectionner une autre version, utilisez le même lien, cliquez sur le bouton Tag : 2.11.9, sélectionnez l'onglet Tags, puis sélectionnez la version appropriée.

  2. Connectez-vous à la EC2 console Amazon AWS Management Console et ouvrez-la à l'adresse https://console.aws.amazon.com/ec2/.

  3. Dans le tableau de EC2 bord Amazon, choisissez Launch instance.

  4. Choisissez Communauté AMIs, recherchez l'ID AWS ParallelCluster AMI, puis sélectionnez-le.

  5. Choisissez votre type d'instance et sélectionnez Suivant : Configurer les détails de l'instance ou Vérifier et lancer pour lancer votre instance.

  6. Choisissez Launch, sélectionnez votre paire de clés et lancez les instances.

  7. Connectez-vous à votre instance à l'aide de l'utilisateur du système d'exploitation et de votre clé SSH. Pour plus d'informations, accédez à Instances, sélectionnez la nouvelle instance et Connect.

  8. Personnalisez votre instance selon vos besoins.

  9. Exécutez la commande suivante pour préparer votre instance pour la création d'une AMI :

    sudo /usr/local/sbin/ami_cleanup.sh

  10. Accédez à Instances, choisissez la nouvelle instance, sélectionnez État de l'instance et Arrêtez

  11. Créez une nouvelle AMI à partir de l'instance à l'aide de la EC2 console ou de la commande AWS CLI create-image.

    Depuis la EC2 console

    1. Choisissez Instances dans le volet de navigation.

    2. Choisissez l'instance que vous avez créée et modifiée.

    3. Dans Actions, choisissez Image, puis Créer une image.

    4. Choisissez Créer une image.

  12. Entrez le nouvel identifiant d'AMI dans le champ custom_ami de la configuration de votre cluster.

Création d'une AWS ParallelCluster AMI personnalisée

Si vous avez une AMI personnalisée et des logiciels déjà en place, vous pouvez appliquer les modifications nécessitées par AWS ParallelCluster par dessus celui-ci.

  1. Installez ce qui suit dans votre système local, avec la AWS ParallelCluster CLI :

    • Packer: recherchez la dernière version de votre système d'exploitation sur le site Web de Packer et installez-la. La version doit être au moins 1.4.0, mais la dernière version est recommandée. Vérifiez que la packer commande est disponible dans votre PATH.

    Note

    Avant AWS ParallelCluster la version 2.8.0, Berkshelf (qui est installé à l'aide degem install berkshelf) devait être utilisé. pcluster createami

  2. Configurez vos Compte AWS informations d'identification afin que Packer puisse appeler les opérations AWS d'API en votre nom. L'ensemble minimal d'autorisations requises pour que Packer fonctionne est documenté dans la section Rôle de tâche ou d'instance IAM de la rubrique Amazon AMI Builder de la documentation Packer.

  3. Utilisez la commande createami de la AWS ParallelCluster CLI pour créer une AWS ParallelCluster AMI à partir de celle que vous avez fournie comme base :

    pcluster createami --ami-id <BASE_AMI> --os <BASE_AMI_OS>
    Important

    Vous ne devez pas utiliser une AWS ParallelCluster AMI provenant d'un cluster en cours d'exécution comme <BASE_AMI> pour la createami commande. Dans le cas contraire, la commande échoue.

    Pour les autres paramètres, voirpcluster createami.

  4. La commande de l'étape 4 exécute Packer, qui effectue spécifiquement les opérations suivantes :

    1. Lance une instance à l'aide de l'AMI de base fournie.

    2. Applique le AWS ParallelCluster livre de recettes à l'instance pour installer le logiciel approprié et effectuer les autres tâches de configuration nécessaires.

    3. Arrête l'instance.

    4. Crée une nouvelle AMI à partir de l'instance.

    5. Résilie l'instance une fois que l'AMI a été créée.

    6. Fournit en sortie la chaîne d'ID de la nouvelle AMI à utiliser pour créer votre cluster.

  5. Pour créer votre cluster, entrez l'ID de l'AMI dans le champ custom_ami de la configuration de votre cluster.

Note

Le type d'instance utilisé pour créer une AWS ParallelCluster AMI personnalisée estt2.xlarge. Ce type d'instance n'est pas éligible au niveau AWS gratuit. Par conséquent, toutes les instances créées lors de la création de cette AMI vous sont facturées.

Utilisation d'une AMI personnalisée lors de l'exécution

Avertissement

Pour éviter le risque d'utiliser une AMI incompatible avec AWS ParallelCluster, nous vous recommandons d'éviter d'utiliser cette méthode.

Lorsque des nœuds de calcul sont lancés alors qu'ils n'ont potentiellement pas été testés AMIs au moment de l'exécution, des incompatibilités avec l'installation AWS ParallelCluster du logiciel requis peuvent AWS ParallelCluster entraîner l'arrêt du fonctionnement.

Si vous ne souhaitez rien créer à l'avance, vous pouvez utiliser votre AMI et en créer une AWS ParallelCluster à partir de cette AMI.

Avec cette méthode, la création prend plus AWS ParallelCluster de temps car tous les logiciels nécessaires au AWS ParallelCluster moment de la création du cluster doivent être installés. De plus, la mise à l'échelle prend également plus de temps.

  • Entrez l'ID d'AMI dans le champ custom_ami de la configuration de votre cluster.