Como se conectar ao nó primário do cluster do Amazon EMR usando SSH

Para configurar as permissões do arquivo de chave privada do par de chaves

Antes de usar sua EC2 chave privada de par de chaves Amazon para criar uma conexão SSH, você deve definir permissões no .pem arquivo para que somente o proprietário da chave tenha permissão para acessá-lo. Isso é necessário para criar uma conexão SSH usando o terminal ou o. AWS CLI

1. Verifique se você permitiu tráfego SSH de entrada. Para obter instruções, consulte Antes de se conectar ao Amazon EMR: autorize o tráfego de entrada.

2. Localize seu arquivo .pem. Estas instruções pressupõem que o arquivo se chame mykeypair.pem e esteja armazenado no diretório inicial do usuário atual.

3. Digite o seguinte comando para definir as permissões. ~/mykeypair.pemSubstitua pelo caminho completo e pelo nome do arquivo de chave privada do par de chaves. Por exemplo, C:/Users/<username>/.ssh/mykeypair.pem.

   chmod 400 ~/mykeypair.pem

   Se você não definir permissões no arquivo .pem, receberá um erro indicando que o arquivo de chave está desprotegido e que a chave será rejeitada. Para conectar, você só precisa definir permissões no arquivo de chave privada do par de chaves ao usá-lo pela primeira vez.

Conectar-se ao nó primário usando o terminal

1. Abra uma janela do terminal. No Mac OS X, escolha Applications > Utilities > Terminal (Aplicativos > Utilitários > Terminal). Em outras distribuições do Linux, o terminal está normalmente localizado em Applications > Accessories > Terminal (Aplicativos > Acessórios > Terminal).

2. Para estabelecer uma conexão com o nó primário, digite o comando a seguir. ec2-###-##-##-###.compute-1.amazonaws.com.rproxy.goskope.comSubstitua pelo nome DNS público primário do seu cluster e ~/mykeypair.pem substitua pelo caminho completo e pelo nome do .pem arquivo. Por exemplo, C:/Users/<username>/.ssh/mykeypair.pem.

   ssh hadoop@ec2-###-##-##-###.compute-1.amazonaws.com -i ~/mykeypair.pem

   Importante

   Você deve usar o nome de logon hadoop ao se conectar ao nó primário do Amazon EMR; caso contrário, poderá ver um erro semelhante a Server refused our key.

3. Um aviso afirma que não foi possível verificar a autenticidade do host ao qual você está se conectando. Digite yes para continuar.

4. Quando você encerrar de trabalhar no nó primário, digite o seguinte comando para encerrar a conexão SSH.

   exit

Conectar-se ao nó primário usando PuTTY

1. Verifique se você permitiu tráfego SSH de entrada. Para obter instruções, consulte Antes de se conectar ao Amazon EMR: autorize o tráfego de entrada.

2. Abra o putty.exe. Você também pode executar o PuTTY na lista de programas do Windows.

3. Se necessário, na lista Category (Categoria), escolha Session (Sessão).

4. Em Nome do host (ou endereço IP), digite hadoop@MasterPublicDNS. Por exemplo: hadoop@ec2-###-##-##-###.compute-1.amazonaws.com.

5. Na lista Category (Categoria), escolha Connection > SSH (Conexão > SSH), Auth.

6. Para Private key file for authentication (Arquivo de chave privada para autenticação), escolha Browse (Procurar) e selecione o arquivo .ppk que você gerou.

7. Escolha Abrir e depois Sim para descartar o alerta de segurança do PuTTY.

   Importante

   Quando fizer login no nó primário, digite hadoop se for solicitado a especificar um nome de usuário.

8. Quando terminar de trabalhar no nó primário, você poderá encerrar a conexão SSH fechando o PuTTY.

   nota

   Para evitar que a conexão SSH atinja o tempo limite, é possível escolher Connection (Conexão) na lista Category (Categoria) e selecionar a opção Enable TCP_keepalives (Habilitar TCP_keepalives). Se você tiver uma sessão SSH ativa no PuTTY, poderá alterar suas configurações abrindo o contexto (botão direito do mouse) para a barra de título do PuTTY e escolhendo Alterar configurações.

Para se conectar ao nó primário usando o AWS CLI

1. Verifique se você permitiu tráfego SSH de entrada. Para obter instruções, consulte Antes de se conectar ao Amazon EMR: autorize o tráfego de entrada.

2. Para recuperar o identificador de cluster, digite:

   aws emr list-clusters

   A saída lista seus clusters, incluindo o cluster IDs. Observe o ID do cluster ao qual você está se conectando.

   "Status": {
       "Timeline": {
           "ReadyDateTime": 1408040782.374,
           "CreationDateTime": 1408040501.213
       },
       "State": "WAITING",
       "StateChangeReason": {
           "Message": "Waiting after step completed"
       }
   },
   "NormalizedInstanceHours": 4,
   "Id": "j-2AL4XXXXXX5T9",
   "Name": "AWS CLI cluster"

3. Digite o comando a seguir para abrir uma conexão SSH com o nó primário. No exemplo a seguir, j-2AL4XXXXXX5T9 substitua pelo ID do cluster e ~/mykeypair.key substitua pelo caminho completo e pelo nome do .pem arquivo (para Linux, Unix e Mac OS X) ou .ppk arquivo (para Windows). Por exemplo, C:\Users\<username>\.ssh\mykeypair.pem.

   aws emr ssh --cluster-id j-2AL4XXXXXX5T9 --key-pair-file ~/mykeypair.key						

4. Quando terminar de trabalhar no nó primário, feche a AWS CLI janela.

   Para obter mais informações, consulte os comandos do Amazon EMR na AWS CLI. Caso tenha dificuldades ao usar o SSH para se conectar ao nó primário, consulte Solução de problemas para conectar-se à sua instância.