Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.
Gestión de la pérdida de instancias de spot en Presto
Con las instancias puntuales de Amazon EMR, puede ejecutar cargas de trabajo de big data en la EC2 capacidad sobrante de Amazon a un coste reducido. A cambio del menor coste, Amazon EC2 puede interrumpir las instancias puntuales con una notificación de dos minutos. Al cerrar un nodo, Presto puede tardar hasta 10 minutos en generar un error. Esto provoca demoras innecesarias en los informes de errores y en los posibles reintentos. La terminación rápida es una característica que le permite controlar la forma en que Presto gestiona los nodos terminados.
El trabajo del coordinador de Presto consiste en hacer un seguimiento de todos los nodos de trabajo mediante sondeos periódicos sobre sus estados. Sin una terminación rápida, el coordinador no consulta al YARN NodeManager para conocer el estado de cada nodo. Esto puede provocar un ciclo de reintento prolongado antes de que la consulta falle. Con una terminación rápida, el coordinador de Presto consulta el estado del nodo tan pronto NodeManager como la encuesta no llegue al anfitrión. Si NodeManager muestra que el nodo está inactivo, Presto abandona los reintentos, falla la consulta y devuelve un error. NODE_DECOMMISSIONED
El siguiente conjunto de parámetros de configuración le permite controlar y personalizar el comportamiento de Presto en caso de que se cierre el nodo.
| Opción | Descripción | Predeterminado |
|---|---|---|
query.remote-task.max-backoff-duration |
El tiempo que el coordinador continúa intentando recuperar el estado de la tarea remota desde los nodos de trabajo. | 10 minutos |
query.remote-task.quick-terminate-node-failure |
Activa un error rápido en el nodo si el coordinador no puede llegar al nodo o no puede conectarse con el trabajador que se ejecuta en ese nodo. El valor de El nodo no supera la consulta y Amazon EMR lo elimina de la lista de trabajadores disponibles. Cuando esto sucede, no puede usar el nodo para programar consultas nuevas. Si establece este valor en |
true |
query.remote-task.terminate-on-connect-exception |
Especifica si Amazon EMR debe ser un nodo si se puede acceder al host, pero el coordinador no puede conectarse al proceso de trabajo del host. Al establecer este valor en true, se activa el error de consulta rápida si no se puede acceder al host. |
false |
