Conexión al nodo principal del clúster de Amazon EMR mediante SSH

Para configurar los permisos de archivo de clave privada del par de claves

Antes de poder usar la EC2 clave privada del par de claves de Amazon para crear una conexión SSH, debes configurar los permisos en el .pem archivo para que solo el propietario de la clave tenga permiso para acceder al archivo. Esto es necesario para crear una conexión SSH mediante el terminal o el. AWS CLI

1. Asegúrese de permitir el tráfico SSH entrante. Para obtener instrucciones, consulte Antes de conectarse a Amazon EMR: autorice el tráfico entrante.

2. Localice su archivo .pem. Estas instrucciones suponen que el archivo se denomina mykeypair.pem y que se almacena en el directorio de inicio del usuario actual.

3. Escriba el comando siguiente para definir los permisos. ~/mykeypair.pemSustitúyalo por la ruta completa y el nombre del archivo de clave privada del par de claves. Por ejemplo, C:/Users/<username>/.ssh/mykeypair.pem.

   chmod 400 ~/mykeypair.pem

   Si no establece permisos en el archivo .pem, recibirá un error indicando que el archivo de clave no está protegido y la clave se rechazará. Para conectarse, solo tiene que establecer permisos en el archivo de clave privada del par de claves la primera vez que lo use.

Para conectarse al nodo principal utilizando el terminal

1. Abra una ventana de terminal. En Mac OS X, elija Aplicaciones > Utilidades > Terminal. En otras distribuciones de Linux, el terminal normalmente se encuentra en Aplicaciones > Accesorios > Terminal.

2. Para establecer una conexión al nodo principal, escriba el siguiente comando. ec2-###-##-##-###.compute-1.amazonaws.com.rproxy.goskope.comSustitúyalo por el nombre DNS público principal de tu clúster y ~/mykeypair.pem sustitúyelo por la ruta completa y el nombre del .pem archivo. Por ejemplo, C:/Users/<username>/.ssh/mykeypair.pem.

   ssh hadoop@ec2-###-##-##-###.compute-1.amazonaws.com -i ~/mykeypair.pem

   importante

   Debe utilizar el nombre de inicio de sesión hadoop cuando se conecte al nodo principal de Amazon EMR; de lo contrario, es posible que vea un error similar a Server refused our key.

3. Una advertencia indica que la autenticidad del host al que se está conectando no se puede verificar. Escriba yes para continuar.

4. Cuando haya terminado de trabajar en el nodo principal, escriba el siguiente comando para cerrar la conexión SSH.

   exit

Para conectarse al nodo principal utilizando PuTTY

1. Asegúrese de permitir el tráfico SSH entrante. Para obtener instrucciones, consulte Antes de conectarse a Amazon EMR: autorice el tráfico entrante.

2. Abra putty.exe. También puede lanzar PuTTY desde la lista de programas de Windows.

3. Si es necesario, en la lista Category (Categoría), elija Session (Sesión).

4. En Nombre de host (o dirección IP), escriba hadoop@MasterPublicDNS. Por ejemplo: hadoop@ec2-###-##-##-###.compute-1.amazonaws.com.

5. En la lista Category (Categoría), elija Connection > SSH (Conexión > SSH), Auth (Autenticación).

6. En Private key file for authentication (Archivo de clave privada para la autenticación), elija Browse (Examinar) y seleccione el archivo .ppk que ha generado.

7. Selecciona Abrir y, a continuación, Sí para descartar la alerta de seguridad de PuTTY.

   importante

   Al iniciar sesión en el nodo principal, escriba hadoop si se le solicita un nombre de usuario.

8. Cuando haya terminado de trabajar en el nodo principal, puede cerrar la conexión SSH cerrando PuTTY;.

   nota

   Para evitar que se supere el tiempo de espera de la conexión SSH, puede elegir Connection (Conexión) en la lista Category (Categoría) y seleccionar la opción Enable TCP_keepalives (Habilitar conexiones keepalives de TCP). Si dispone de una sesión de SSH activa en PuTTY, puede cambiar la configuración abriendo el contexto (clic con el botón derecho) en la barra del título de PuTTY y seleccionar Cambiar configuración.

Para conectarse al nodo principal mediante el AWS CLI

1. Asegúrese de permitir el tráfico SSH entrante. Para obtener instrucciones, consulte Antes de conectarse a Amazon EMR: autorice el tráfico entrante.

2. Para recuperar el identificador del clúster, escriba:

   aws emr list-clusters

   El resultado muestra los clústeres, incluido el clúster IDs. Tenga en cuenta el ID del clúster al que se está conectando.

   "Status": {
       "Timeline": {
           "ReadyDateTime": 1408040782.374,
           "CreationDateTime": 1408040501.213
       },
       "State": "WAITING",
       "StateChangeReason": {
           "Message": "Waiting after step completed"
       }
   },
   "NormalizedInstanceHours": 4,
   "Id": "j-2AL4XXXXXX5T9",
   "Name": "AWS CLI cluster"

3. Escriba el comando siguiente para abrir una conexión SSH al nodo principal. En el ejemplo siguiente, j-2AL4XXXXXX5T9 sustitúyalo por el ID del clúster y ~/mykeypair.key sustitúyelo por la ruta completa y el nombre del .pem archivo (para Linux, Unix y Mac OS X) o .ppk archivo (para Windows). Por ejemplo, C:\Users\<username>\.ssh\mykeypair.pem.

   aws emr ssh --cluster-id j-2AL4XXXXXX5T9 --key-pair-file ~/mykeypair.key						

4. Cuando termine de trabajar en el nodo principal, cierre la AWS CLI ventana.

   Para más información, consulte Comandos de Amazon EMR en la AWS CLI. Si tiene dificultades para usar SSH para conectarse a su nodo principal, consulte Solucionar problemas de conexión a su instancia.