Como se conectar ao nó primário do cluster do Amazon EMR usando SSH

Para configurar as permissões do arquivo de chave privada do par de chaves

Antes de usar sua chave privada do par de chaves do Amazon EC2 para criar uma conexão SSH, você deve definir permissões no arquivo .pem para que apenas o proprietário da chave tenha permissão para acessar o arquivo. Isso é necessário para criar uma conexão SSH usando o terminal ou a AWS CLI.

1. Verifique se você permitiu tráfego SSH de entrada. Para obter instruções, consulte Antes de se conectar ao Amazon EMR: autorize o tráfego de entrada.

2. Localize seu arquivo .pem. Estas instruções pressupõem que o arquivo se chame mykeypair.pem e esteja armazenado no diretório inicial do usuário atual.

3. Digite o seguinte comando para definir as permissões. Substitua ~/mykeypair.pem pelo caminho completo e nome do arquivo de chave privada de par de chaves. Por exemplo, C:/Users/<username>/.ssh/mykeypair.pem.

   chmod 400 ~/mykeypair.pem

   Se você não definir permissões no arquivo .pem, receberá um erro indicando que o arquivo de chave está desprotegido e que a chave será rejeitada. Para conectar, você só precisa definir permissões no arquivo de chave privada do par de chaves ao usá-lo pela primeira vez.

Conectar-se ao nó primário usando o terminal

1. Abra uma janela do terminal. No Mac OS X, escolha Applications > Utilities > Terminal (Aplicativos > Utilitários > Terminal). Em outras distribuições do Linux, o terminal está normalmente localizado em Applications > Accessories > Terminal (Aplicativos > Acessórios > Terminal).

2. Para estabelecer uma conexão com o nó primário, digite o comando a seguir. Substitua ec2-###-##-##-###.compute-1.amazonaws.com pelo nome DNS público primário de seu cluster e substitua ~/mykeypair.pem pela caminho completo e nome de arquivo do arquivo .pem. Por exemplo, C:/Users/<username>/.ssh/mykeypair.pem.

   ssh hadoop@ec2-###-##-##-###.compute-1.amazonaws.com -i ~/mykeypair.pem

   Importante

   Você deve usar o nome de logon hadoop ao se conectar ao nó primário do Amazon EMR; caso contrário, poderá ver um erro semelhante a Server refused our key.

3. Um aviso afirma que não foi possível verificar a autenticidade do host ao qual você está se conectando. Digite yes para continuar.

4. Quando você encerrar de trabalhar no nó primário, digite o seguinte comando para encerrar a conexão SSH.

   exit

Conectar-se ao nó primário usando PuTTY

1. Verifique se você permitiu tráfego SSH de entrada. Para obter instruções, consulte Antes de se conectar ao Amazon EMR: autorize o tráfego de entrada.

2. Abra o putty.exe. Você também pode executar o PuTTY na lista de programas do Windows.

3. Se necessário, na lista Category (Categoria), escolha Session (Sessão).

4. Para Nome do host (ou endereço IP), digite hadoop@MasterPublicDNS. Por exemplo, hadoop@ec2-###-##-##-###.compute-1.amazonaws.com.

5. Na lista Category (Categoria), escolha Connection > SSH (Conexão > SSH), Auth.

6. Para Private key file for authentication (Arquivo de chave privada para autenticação), escolha Browse (Procurar) e selecione o arquivo .ppk que você gerou.

7. Escolha Abrir e depois Sim para descartar o alerta de segurança do PuTTY.

   Importante

   Quando fizer login no nó primário, digite hadoop se for solicitado a especificar um nome de usuário.

8. Quando terminar de trabalhar no nó primário, você poderá encerrar a conexão SSH fechando o PuTTY.

   nota

   Para evitar que a conexão SSH atinja o tempo limite, é possível escolher Connection (Conexão) na lista Category (Categoria) e selecionar a opção Enable TCP_keepalives (Habilitar TCP_keepalives). Se você tiver uma sessão SSH ativa no PuTTY, poderá alterar suas configurações abrindo o contexto (botão direito do mouse) para a barra de título do PuTTY e escolhendo Alterar configurações.

Conectar-se ao nó primário usando a AWS CLI

1. Verifique se você permitiu tráfego SSH de entrada. Para obter instruções, consulte Antes de se conectar ao Amazon EMR: autorize o tráfego de entrada.

2. Para recuperar o identificador de cluster, digite:

   aws emr list-clusters

   A saída lista seus clusters, incluindo os IDs dos clusters. Observe o ID do cluster ao qual você está se conectando.

   "Status": {
       "Timeline": {
           "ReadyDateTime": 1408040782.374,
           "CreationDateTime": 1408040501.213
       },
       "State": "WAITING",
       "StateChangeReason": {
           "Message": "Waiting after step completed"
       }
   },
   "NormalizedInstanceHours": 4,
   "Id": "j-2AL4XXXXXX5T9",
   "Name": "AWS CLI cluster"

3. Digite o comando a seguir para abrir uma conexão SSH com o nó primário. No exemplo a seguir, substitua j-2AL4XXXXXX5T9 pelo ID do cluster e substitua ~/mykeypair.key pelo caminho completo e nome do arquivo .pem (para Linux, Unix e Mac OS X) ou arquivo .ppk (para Windows). Por exemplo, C:\Users\<username>\.ssh\mykeypair.pem.

   aws emr ssh --cluster-id j-2AL4XXXXXX5T9 --key-pair-file ~/mykeypair.key						

4. Quando terminar de trabalhar no nó primário, feche a janela da AWS CLI.

   Para obter mais informações, consulte os comandos do Amazon EMR na AWS CLI. Caso tenha dificuldades ao usar o SSH para se conectar ao nó primário, consulte Solução de problemas para conectar-se à sua instância.