Pré-requisitos para usar o SageMaker HyperPod - Amazon SageMaker
SageMaker HyperPod cotasConfigurando SageMaker HyperPod com a Amazon VPCConfigurando AWS Systems Manager e executando como para controle de acesso do usuário do cluster(Opcional) Configurando SageMaker HyperPod com o Amazon FSx for Lustre

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Pré-requisitos para usar o SageMaker HyperPod

As seções a seguir explicam os pré-requisitos antes de começar. SageMaker HyperPod

SageMaker HyperPod cotas

Você pode criar SageMaker HyperPod clusters considerando as cotas de uso do cluster em sua AWS conta.

Importante

Para saber mais sobre SageMaker HyperPod preços, consulte SageMaker HyperPod preços Amazon SageMaker Pricing.

Veja as SageMaker HyperPod cotas da Amazon usando o console AWS de gerenciamento

Procure os valores padrão e aplicados de uma cota, também conhecida como limite, para uso do cluster, que é usada para SageMaker HyperPod.

  1. Abra o console de Service Quotas.

  2. No painel de navegação à esquerda, escolha AWS services (Serviços da ).

  3. Na lista de AWS serviços, pesquise e selecione Amazon SageMaker.

  4. Na lista de cotas de serviço, você pode ver o nome da cota de serviço, o valor aplicado (se disponível), a cota AWS padrão e se o valor da cota é ajustável.

  5. Na barra de pesquisa, digite uso do cluster. Isso mostra as cotas para uso do cluster, as cotas aplicadas e as cotas padrão.

Solicitação de SageMaker HyperPod cotas da Amazon usando o AWS Management Console

Aumente suas cotas no nível da conta ou do recurso.

  1. Para aumentar a cota de instâncias para uso do cluster, selecione a cota que você deseja aumentar.

  2. Se a cota for ajustável, você poderá solicitar um aumento de cota no nível da conta ou do recurso com base no valor listado na coluna Ajustabilidade.

  3. Em Aumentar valor da cota, insira o novo valor. O novo valor deve ser maior que o valor atual.

  4. Escolha Solicitar.

  5. Para visualizar qualquer solicitação pendente ou resolvida recentemente no console, navegue até a guia Histórico de solicitações na página de detalhes do serviço ou escolha Painel no painel de navegação. Para solicitações pendentes, escolha o status da solicitação para abrir o recibo da solicitação. O status inicial de uma solicitação é Pending (Pendente). Depois que o status mudar para Cota solicitada, você verá o número do caso com AWS Support. Escolha o número do caso para abrir o tíquete de sua solicitação.

Para saber mais sobre como solicitar um aumento de cota em geral, consulte Solicitando um aumento de cota no Service QuotasAWS User Guide.

Configurando SageMaker HyperPod com a Amazon VPC

Para configurar um SageMaker HyperPod cluster com sua AmazonVPC, verifique os itens a seguir.

nota

É necessário para orquestrar comEKS, e você deve usar o mesmo VPC para o HyperPod cluster. Para orquestrar com o Slurm, configurar sua própria é opcional. VPC

  • Se você quiser usar o seu próprio VPC para se conectar SageMaker HyperPod aos AWS recursos do seuVPC, precisará fornecer o VPC nome, ID Região da AWS, ID da sub-rede e ID do grupo de segurança ao criar SageMaker HyperPod. Se você quiser criar um novoVPC, consulte Criar um padrão VPC ou Criar um VPC no Guia do usuário da Amazon Virtual Private Cloud.

  • É importante que você crie todos os seus recursos na mesma zona de disponibilidade Região da AWS e configure as regras do grupo de segurança para permitir a conexão entre os recursos na suaVPC. Por exemplo, suponha que você crie um VPC inus-west-2. Você deve criar uma sub-rede VPC nessa zona us-west-2a de disponibilidade e criar um grupo de segurança que permita todo o tráfego de entrada (entrada) de dentro do grupo de segurança e todo o tráfego de saída.

  • Você também precisa garantir que VPC tenha conexão com o Amazon Simple Storage Service (Amazon S3). Se você configurar umVPC, os grupos de SageMaker HyperPod instâncias não terão acesso à Internet e, portanto, não poderão se conectar ao Amazon S3 para acessar ou armazenar arquivos como scripts de ciclo de vida, dados de treinamento e artefatos de modelo. Para estabelecer conexão com o Amazon S3 durante o usoVPC, você deve criar um VPC endpoint. Ao criar um VPC endpoint, você pode permitir que os grupos de SageMaker HyperPod instâncias acessem os buckets do Amazon S3 dentro do mesmo. VPC Recomendamos que você também crie uma política personalizada que permita que somente solicitações de sua conta privada VPC acessem seus buckets do Amazon S3. Para obter mais informações, consulte Endpoints para Amazon S3 no AWS PrivateLink Guia.

  • Se você quiser criar um HyperPod cluster com instâncias EFA habilitadas, certifique-se de configurar um grupo de segurança para permitir todo o tráfego de entrada e saída de e para o próprio grupo de segurança. Para saber mais, consulte Etapa 1: Preparar um grupo de segurança EFA habilitado no Guia do EC2 usuário da Amazon.

Configurando AWS Systems Manager e executando como para controle de acesso do usuário do cluster

SageMaker HyperPod DLAMIvem com AWS Systems Manager(SSM) pronto para uso para ajudar você a gerenciar o acesso aos seus grupos de instâncias de SageMaker HyperPod cluster. Esta seção descreve como criar usuários do sistema operacional (SO) em seus SageMaker HyperPod clusters e associá-los a IAM usuários e funções. Isso é útil para autenticar SSM sessões usando as credenciais da conta de usuário do sistema operacional.

Ativando o Run As em sua AWS conta

Como administrador AWS da conta ou administrador da nuvem, você pode gerenciar o acesso aos SageMaker HyperPod clusters em um nível de IAM função ou usuário usando o recurso Run As em SSM. Com esse recurso, você pode iniciar cada SSM sessão usando o usuário do sistema operacional associado à IAM função ou ao usuário.

Para ativar o Run As em sua AWS conta, siga as etapas em Ativar o suporte ao Run As para nós gerenciados do Linux e macOS. Se você já criou usuários de sistema operacional em seu cluster, certifique-se de associá-los a IAM funções ou usuários marcando-os conforme orientado na Opção 2 da etapa 5, em Para ativar o suporte Run As para nós gerenciados do Linux e macOS.

(Opcional) Configurando SageMaker HyperPod com o Amazon FSx for Lustre

Para começar a usar SageMaker HyperPod e mapear caminhos de dados entre o cluster e seu sistema de arquivos FSx for Lustre, selecione um dos Regiões da AWS compatíveis com. SageMaker HyperPod Depois de escolher a Região da AWS que você prefere, você também deve determinar qual zona de disponibilidade (AZ) usar. Se você usar nós de SageMaker HyperPod computação AZs diferentes de AZs onde seu sistema de arquivos FSx for Lustre está configurado no mesmo Região da AWS, pode haver sobrecarga de comunicação e rede. Recomendamos que você use a mesma AZ física da conta de SageMaker HyperPod serviço para evitar qualquer tráfego cruzado de AZ entre SageMaker HyperPod clusters e seu sistema de arquivos FSx for Lustre. Além disso, verifique se você o configurou com seuVPC. Se você quiser usar a Amazon FSx como o principal sistema de arquivos para armazenamento, deverá configurar SageMaker HyperPod clusters comVPC.