Tutorial: criar uma definição de trabalho em paralelo de vários nós nos recursos do Amazon EC2

Para criar uma definição de trabalho em paralelo de vários nós nos recursos do Amazon EC2:

1. Abra o console AWS Batch em https://console.aws.amazon.com/batch/.

2. Na barra de navegação, selecione Região da AWS a ser usada.

3. No painel de navegação, escolha Definições de trabalho.

4. Escolha Criar.

5. Para o Tipo de orquestração, escolha Amazon Elastic Compute Cloud (Amazon EC2).

6. Em Habilitar paralelo de vários nós, ative o paralelo de vários nós.

7. Em Nome, insira um nome exclusivo para a sua definição de trabalho. O nome pode ter até 128 caracteres e pode conter letras minúsculas e maiúsculas, números, hifens (-) e sublinhados (_).

8. (Opcional) Em Execution timeout, especifique o número máximo de segundos permitidos para as execuções das tentativas de trabalho. Se uma tentativa exceder o tempo limite, ela será interrompida e passada para um status FAILED. Para ter mais informações, consulte Tempos limite de trabalho.

9. (Opcional) Ative a Prioridade de Agendamento. Insira um valor de prioridade de agendamento entre 0 e 100. Valores mais altos têm maior prioridade sobre valores mais baixos.

10. (Opcional) Para Tentativas de Trabalho, insira o número máximo de vezes que AWS Batch tenta mover o trabalho para um status RUNNABLE. Insira um número inteiro entre 1 e 10.

11. (Opcional) Em Repetir condições da estratégia, escolha Adicionar avaliação na saída. Insira pelo menos um valor de parâmetro e escolha uma Ação. Para cada conjunto de condições, Ação deve ser definida como Tentar Novamente ou Sair. Essas ações significam o seguinte:

    • Tentar novamente: o AWS Batch tenta novamente até que o número de tentativas de trabalho que você especificou seja atingido.

    • Sair: o AWS Batch para de tentar novamente o trabalho.

    Importante

    Se você escolher Adicionar avaliação na saída, deverá configurar pelo menos um parâmetro e ou escolher uma Ação ou escolher Remover avaliação na saída.

12. (Opcional) Expanda Tags e então, escolha Adicionar Tag para adicionar tags ao recurso. Insira uma chave e um valor opcional e, em seguida, selecione Add tag. Você também pode ativar a opção Propagate tags para propagá-las do trabalho e da definição de trabalho para a tarefa do Amazon ECS.

13. Escolha Próxima página.

14. Em Number of nodes, insira o número total de nós a serem usados em sua tarefa.

15. Em Main node, insira o índice do nó a ser usado para o nó principal. O índice do nó principal padrão é 0.

16. Em Instance Type, selecione um tipo de instância.

    nota

    O tipo de instância que você escolher se aplica a todos os nós.

17. Em Parâmetros, escolha Adicionar parâmetros para adicionar espaços reservados para substituição de parâmetros como pares de chave e valor opcionais.

18. Na seção Node ranges:

    1. Selecione Add node range. Isso cria uma seção Node range.

    2. Em Target nodes, especifique o intervalo para o seu grupo de nós usando a anotação range_start:range_end.

       Você pode criar até cinco intervalos de nós para os nós especificados para seu trabalho. Os intervalos de nós usam o valor do índice para um nó e o índice do nó começa em 0. Certifique-se de que o valor do índice final do intervalo do seu grupo final de nós seja um a menos do que o número de nós que você especificou. Por exemplo, suponha que você especificou 10 nós e deseja usar um único grupo de nós. Então, seu intervalo final é 9.

    3. Para Imagem, escolha a imagem do Docker a ser usada em seu trabalho. Por padrão, as imagens no registro do Docker Hub estão disponíveis. Você também pode especificar outros repositórios com repository-url/image:tag. O nome pode ter até 225 caracteres. Pode conter letras maiúsculas e minúsculas, números, hifens (-), sublinhados (_), dois pontos (:), barras (/) e sinais de número (#). Esse parâmetro é mapeado para Image na seção Criar um contêiner da Docker Remote API e o parâmetro IMAGE de docker run.

       nota

       A arquitetura da imagem do Docker deve corresponder à arquitetura do processador dos recursos de computação nos quais eles foram programados. Por exemplo, imagens Arm baseadas em Docker só podem ser executadas em recursos de computação baseados em Arm.

       • As imagens em repositórios públicos do Amazon ECR usam as convenções de nomenclatura completaregistry/repository[:tag] ou registry/repository[@digest] (por exemplo, public.ecr.aws/registry_alias/my-web-app:latest).

       • As imagens nos repositórios do Amazon ECR usam a convenção de registry/repository[:tag] nomenclatura completa. Por exemplo, aws_account_id.dkr.ecr.region.amazonaws.com/my-web-app:latest

       • Imagens em repositórios oficiais em Docker Hub usam um único nome (por exemplo, ubuntu ou mongo).

       • Imagens em outros repositórios Docker Hub são qualificadas com um nome de organização (por exemplo, amazon/amazon-ecs-agent).

       • Imagens em outros repositórios online também são qualificadas por um nome de domínio (por exemplo, quay.io/assemblyline/ubuntu).

    4. Para a Sintaxe de comando‭, escolha Bash ou JSON.

    5. Para Command, especifique o comando a ser passado para o contêiner. Para comandos simples, você pode digitar o comando como faria em um prompt de comando na guia Delimitado por espaço. Em seguida, verifique se o resultado JSON está correto. O resultado do JSON é passado para o Docker daemon. Para comandos mais complicados (por exemplo, com caracteres especiais), você pode alternar para a guia JSON e inserir a matriz de string equivalente.

       Esse parâmetro é mapeado para Cmd na seção Criar um contêiner da Docker Remote API e o parâmetro COMMAND de docker run. Para obter mais informações sobre o parâmetro Docker CMD, consulte https://docs.docker.com/engine/reference/builder/#cmd.

       nota

       Você pode usar os valores padrão de substituição de parâmetros e espaços reservados no seu comando. Para ter mais informações, consulte Parâmetros.

    6. Para vCPUs, especifique o número de vCPUs a serem reservadas para o contêiner. Esse parâmetro é mapeado para CpuShares na seção Criar um Contêiner da API remota do Docker e a opção --cpu-shares para docker run. Cada vCPU equivale a 1.024 compartilhamentos de CPU. Você deve especificar pelo menos uma vCPU.

    7. Para Memória, especifique o limite rígido (em MiB) de memória a ser apresentado ao contêiner do trabalho. Caso seu contêiner tente exceder a memória especificada, o mesmo será interrompido. Esse parâmetro é mapeado para Memory na seção Criar um Contêiner da API Remota Docker e para a opção --memory para docker run. Você deve especificar pelo menos 4 MiB de memória para uma tarefa.

       nota

       Para maximizar a utilização de recursos, você pode fornecer aos seus trabalhos o máximo de memória possível para um determinado tipo de instância. Para ter mais informações, consulte Gerenciamento de memória de recursos de computação.

    8. (Opcional) Em Number of GPUs, especifique o número de GPUs que a tarefa vai usar. A tarefa será executada em um contêiner com o número especificado de GPUs fixadas a esse contêiner.

    9. (Opcional) Para Job role, é possível especificar uma função do perfil do IAM que fornece o contêiner no trabalho com permissões para usar as APIs da AWS. Esse atributo usa perfis do IAM Amazon ECS para funcionalidade de tarefa. Para obter mais informações, consulte IAM Roles for Tasks no Guia do desenvolvedor do Amazon Elastic Container Service.

       nota

       Para trabalhos que são executados nos recursos do Fargate, é necessário um perfil de trabalho.

       nota

       Somente perfis que tenham o relacionamento de confiança Função da tarefa do Amazon Elastic Container Service são mostradas aqui. Para obter mais informações sobre como criar um perfil do IAM para os trabalhos do seu AWS Batch, consulte Como criar um perfil do IAM e uma política para suas tarefas no Guia do desenvolvedor do Amazon Elastic Container Service.

    10. (Opcional) Para Função de execução, especifique um perfil do IAM que conceda aos atendentes de contêiner do Amazon ECS permissão para fazer chamadas da API da AWS em seu nome. Esse atributo usa perfis do IAM Amazon ECS para funcionalidade de tarefa. Para obter mais informações, consulte Perfis do IAM para execução de tarefa do Amazon ECS no Guia do desenvolvedor do Amazon Elastic Container Service.

19. (Opcional) Expanda Configuração adicional:

    1. Em Environment variables, escolha Adicionar Variável de Ambiente para adicionar variáveis de ambiente como pares de nome e valor. Essas variáveis serão passadas para o contêiner.

    2. Para Job role, é possível especificar uma função do perfil do IAM que fornece o contêiner no seu trabalho com permissões para usar as APIs da AWS. Esse atributo usa perfis do IAM Amazon ECS para funcionalidade de tarefa. Para obter mais informações, consulte IAM Roles for Tasks no Guia do desenvolvedor do Amazon Elastic Container Service.

       nota

       Para trabalhos que são executados nos recursos do Fargate, é necessário um perfil de trabalho.

       nota

       Somente perfis que tenham o relacionamento de confiança Função da tarefa do Amazon Elastic Container Service são mostradas aqui. Para obter mais informações sobre como criar um perfil do IAM para os trabalhos do seu AWS Batch, consulte Como criar um perfil do IAM e uma política para suas tarefas no Guia do desenvolvedor do Amazon Elastic Container Service.

    3. Para Execution role, especifique um perfil do IAM que conceda aos agentes de contêiner do Amazon ECS permissão para fazer chamadas de API AWS em seu nome. Esse atributo usa perfis do IAM Amazon ECS para funcionalidade de tarefa. Para obter mais informações, consulte Perfis do IAM para execução de tarefa do Amazon ECS no Guia do desenvolvedor do Amazon Elastic Container Service.

20. Na seção Configuração de segurança:

    1. (Opcional) Para oferecer ao contêiner da tarefa privilégios elevados na instância do host (semelhante ao usuário root), selecione Privileged. Esse parâmetro é mapeado para Privileged na seção Criar um Contêiner da API remota do Docker e a opção --privileged para docker run.

    2. (Opcional) Para Usuário, insira o nome do usuário a ser usado dentro do contêiner. Esse parâmetro é mapeado para User na seção Criar um Contêiner da API remota do Docker e a opção --user para docker run.

    3. (Opcional) Em Segredos, escolha Adicionar segredo para adicionar segredos como pares de nome-valor. Esses segredos são expostos no contêiner. Para obter mais informações, consulte LogConfiguration:secretOptions.

21. Na seção Configuração do Linux:

    1. Ative Habilitar sistema de arquivos somente para leitura para remover o acesso de gravação ao volume.

    2. (Opcional) Ative o processo init para executar um processo init dentro do contêiner. Este processo encaminha sinais e colhe processos.

    3. Para Tamanho da memória compartilhada, insira o tamanho (em MiB) do volume /dev/shm.

    4. Em Tamanho máximo de troca, insira a quantidade total de memória de troca (em MiB) que o contêiner pode usar.

    5. Em Swappiness, insira um valor entre 0 e 100 para indicar o comportamento de troca de memória do contêiner. Se você não especificar um valor e a troca estiver ativada, o valor padrão será 60. Para obter mais informações, consulte LinuxParameters:swappiness.

    6. (Opcional) Em Dispositivos, escolha Adicionar dispositivo para adicionar um dispositivo:

       1. Em Container path (Caminho do contêiner), especifique o caminho na instância de contêiner para expor o dispositivo mapeado para a instância de host. Se isso for deixado em branco, o caminho de host será usado no contêiner.

       2. Em Host path, especifique o caminho de um dispositivo na instância de host.

       3. Em Permissões, selecione uma ou mais permissões para serem aplicadas ao dispositivo. As permissões disponíveis são LER, GRAVAR e MKNOD.

22. (Opcional) Em Pontos de montagem, escolha Adicionar configuração de pontos de montagem para adicionar pontos de montagem para volumes de dados. Você deve especificar o volume de origem e o caminho do contêiner. Esses pontos de montagem são passados para o Docker daemon em uma instância de contêiner. Você também pode optar por tornar o volume somente para leitura.

23. (Opcional) Para Configuração de ulimits, escolha Adicionar ulimit para adicionar um valor de ulimits ao contêiner. Insira os valores de Nome, Limite flexível, e Limite rígido e, em seguida, escolha Adicionar ulimit.

24. (Opcional) Para Configuração de volumes, escolha Adicionar volume para criar uma lista de volumes a serem passados para o contêiner. Insira Nome e Caminho de origem para o volume e escolha Adicionar volume. Você também pode optar por ativar o Habilitar EFS.

25. (Opcional) Para Tmpfs, escolha Adicionar tmpfs para adicionar uma montagem tmpfs.

26. (Opcional) Na seção Configuração de registro:

    1. Em Driver de log, escolha o driver de log a ser usado. Para obter mais informações sobre os drivers de log disponíveis, consulte LogConfiguration:logDriver.

       nota

       Por padrão, o driver de log awslogs é usado.

    2. Em Opções, escolha Adicionar opção para adicionar uma opção. Insira um par nome-valor e então escolha Adicionar opção.

    3. Em Segredos, escolha Adicionar segredo. Insira um par nome-valor e escolha Adicionar segredo para adicionar um segredo.

       dica

       Para obter mais informações, consulte LogConfiguration:secretOptions.

27. Escolha Próxima página.

28. Para a Revisão de Definição de Tarefa, revise as etapas de configuração. Se precisar fazer alterações, escolha Edit (Editar). Quando terminar, escolha Criar Definição de Trabalho.