Amazon EMR 7.4.0 — Notas de lançamento do Hive

Upgrade

HIVE-28191: Atualize a versão do Hadoop para 3.4.0

Upgrade

Atualize o protobuf compartilhado do hadoop para 3.21

Upgrade

Atualize commons-cli para 1.5.0

Upgrade

Atualize commons-compress para 1.24.0

Upgrade

Atualize commons-io para 2.14.0

Upgrade

Atualize commons-lang3 para 3.21.0

Melhoria

Altere o tempo de espera até que a sessão Tez seja aberta ao tentar usar a sessão existente no HiveCLI para 10s

Melhoria

Ative o mecanismo de curto-circuito no Tez DAG para consultas de seleção simples com LIMIT

Melhoria

HIVE-21100: Permitir o nivelamento dos subdiretórios da tabela resultante do uso do mecanismo TEZ e da cláusula UNION

Correção de bugs

HIVE-25095: O comando Beeline/hive -e não consegue lidar com a consulta com aspas finais

Correção de bugs

HIVE-13781: O Tez Job falhou quando o diretório de partição não existe FileNotFoundException

Correção de bugs

HIVE-28480: Desative o SMB na incompatibilidade do gerador de hash de partição entre ramificações de junção no RS anterior

hive-site

hive.ignore.failure.partition.dir.not.found

false

Ignora a falha se a partição da tabela existir, mas o caminho real de armazenamento do objeto não existir.

hive-site

subdiretórios hive.tez.union.flatten.subdiretórios

false

Ao gravar dados em uma tabela e UNION ALL ser a última etapa da consulta, o Hive on Tez cria um subdiretório para cada ramificação do UNION ALL. Quando essa propriedade é ativada, os subdiretórios são removidos e os arquivos são renomeados e movidos para o diretório principal. Observe que isso não tem efeito quando o hive.blobstore.use.output-committer está ativado.