Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.
Amazon EMR 6.9.0: notas de la versión de Hive
Amazon EMR 6.9.0: cambios en Hive
| Tipo | Descripción |
|---|---|
| Upgrade | Actualización de Jetty a 9.4.48.v20220622 |
| Upgrade | Compatibilidad con Hadoop 3.3.3 |
| Característica | Integración de Amazon EMR Hive con Lake Formation para cargas de trabajo interactivas mediante la API de GCSC. |
| Característica | Integración de Amazon EMR Hive con Iceberg. |
| Mejora | Active SSL en HiveServer 2 cuando el cifrado en tránsito esté habilitado mediante las configuraciones de seguridad de Amazon EMR. |
| Mejora | Habilite el confirmador optimizado de Hive EMRFS de Amazon S3 de forma predeterminada. Para obtener más información, consulte Habilitación del confirmador optimizado Hive EMRFS S3. |
| Mejora | Agregue HiveHBaseTableInputFormatV2 que hereda solo la versión mapeada de para corregir el SPARK-34210 InputFormat .hive.hbase.inputformat.v2 en true para usarlo. |
| Mejoras | Espere a que TezAM se inicie en segundo plano con hive.cli.tez.session.async en lugar de cerrarlo y lanzar uno nuevo inmediatamente. Use hive.emr.cli.tez.session.open.timeout para configurar este tiempo de espera en segundos. |
| Mejoras | Agregue la opción hive.conf.restricted.list.append para anexar configuraciones separadas por comas a la lista hive.conf.restricted.list de configuraciones restringidas existente. |
| Mejoras | Se muestra un mensaje de error más claro cuando se produce un error en la consulta de Hive porque la ubicación de la base de datos no está definida. |
| Portabilidad con versiones anteriores | HIVE-24484 |
| Portabilidad con versiones anteriores | HIVE-22398 |
| Portabilidad con versiones anteriores | HIVE-23190: LLAP: modificar |
| Portabilidad con versiones anteriores | HIVE-22185: El HADOOP-15832 provocará problemas |
| Portabilidad con versiones anteriores | HIVE-21670mockito-all por la dependencia de mockito-core. |
| Portabilidad con versiones anteriores | HIVE-24542 |
| Portabilidad con versiones anteriores | HIVE-23751#mkdirs() ProxyFileSystem |
| Portabilidad con versiones anteriores | HIVE-21603 |
| Portabilidad con versiones anteriores | HIVE-24083hcatalog en Hadoop 3.3.0: se necesita un tipo de autenticación. |
| Portabilidad con versiones anteriores | HIVE-24282 |
| Portabilidad con versiones anteriores | HIVE-20656 |
| Portabilidad con versiones anteriores | HIVE-25443 |
| Portabilidad con versiones anteriores | HIVE-19792 |
| Portabilidad con versiones anteriores | HIVE-20437 |
| Portabilidad con versiones anteriores | HIVE-21987 |
| Portabilidad con versiones anteriores | HIVE-20038 |
Amazon EMR 6.9.0: problemas conocidos de Hive
Con las versiones 6.6.0 a 6.9.x de Amazon EMR, las consultas INSERT con partición dinámica y una cláusula ORDER BY o SORT BY siempre tendrán dos reductores. Este problema se debe al cambio HIVE-20703
de OSS, que sitúa la optimización de la clasificación dinámica de las particiones en una decisión basada en los costos. Si su carga de trabajo no requiere ordenar las particiones dinámicas, le recomendamos que establezca la propiedad hive.optimize.sort.dynamic.partition.thresholden-1para deshabilitar la nueva característica y obtener el número de reductores calculado correctamente. Este problema se ha corregido en OSS Hive como parte de HIVE-22269y se ha corregido en Amazon EMR 6.10.0.
