Parâmetros para registro em log no Aurora PostgreSQL - Amazon Aurora

Parâmetros para registro em log no Aurora PostgreSQL

Você pode personalizar o comportamento do registro em log do cluster de banco de dados do Aurora PostgreSQLda instância de banco de dados do RDS para PostgreSQL modificando vários parâmetros. Na tabela a seguir, você encontra os parâmetros que afetam por quanto tempo os logs são armazenados, quando alternar o log e se ele deve ser gerado no formato CSV (valor separado por vírgula). Você também pode encontrar a saída de texto enviada para STDERR, entre outras configurações. Para alterar as configurações dos parâmetros que podem ser modificados, use um grupo de parâmetros de cluster de banco de dados para o cluster de banco de dados do Aurora PostgreSQL. Para ter mais informações, consulte Grupos de parâmetros para Amazon Aurora. Conforme observado na tabela, o log_line_prefix não pode ser alterado.

Parâmetro Padrão Descrição

log_destination

stderr

Define o formato de saída para o log. O padrão é stderr, mas você também pode especificar valores separados por vírgula (CSV) adicionando csvlog à configuração. Para ter mais informações, consulte Definir o destino dos logs (stderr, csvlog)

log_filename

postgresql.log.%Y-%m-%d-%H%M

Especifica o padrão para o nome do arquivo de log. Além do padrão, esse parâmetro é compatível com postgresql.log.%Y-%m-%d e postgresql.log.%Y-%m-%d-%H para o padrão de nome de arquivo.

log_line_prefix

%t:%r:%u@%d:[%p]:

Define o prefixo para cada linha de log que é gravada em stderr, para anotar a hora (%t), o host remoto (%r), o usuário (%u), o banco de dados (%d) e o ID do processo (%p). Não é possível modificar esse parâmetro.

log_rotation_age

60

Minutos após os quais o arquivo de log é alternado automaticamente. É possível alterar esse valor no intervalo de 1 a e 1.440 minutos. Para ter mais informações, consulte Configurar a alternância do arquivo de log.

log_rotation_size

O tamanho (kB) no qual o log é alternado automaticamente. É possível alterar esse valor no intervalo de 50.000 a 1.000.000 de quilobytes. Para saber mais, consulte Configurar a alternância do arquivo de log.

rds.log_retention_period

4.320

Os logs do PostgreSQL mais antigos que o número especificado de minutos são excluídos. O valor padrão de 4.320 minutos exclui os arquivos de log após três dias. Para ter mais informações, consulte Definir o período de retenção de log.

Para identificar problemas de aplicações, você pode procurar falhas de consulta, falhas de login, deadlocks e erros fatais de servidor no log. Por exemplo, suponha que você converta uma aplicação herdada do Oracle no Aurora PostgreSQL, mas nem todas as consultas foram convertidas corretamente. Essas consultas formatadas incorretamente geram mensagens de erro nos logs, que você pode usar para identificar problemas. Para ter mais informações sobre o registro em log de consultas, consulte Ativar o registro em log de consultas para seu cluster de banco de dados do Aurora PostgreSQL.

Nos tópicos a seguir, você encontrará informações sobre como definir vários parâmetros que controlam os detalhes básicos de seus logs do PostgreSQL.

Definir o período de retenção de log

O parâmetro rds.log_retention_period especifica por quanto tempo seu cluster de banco de dados do Aurora PostgreSQL mantém seus arquivos de log. A configuração padrão é de três dias (4.320 minutos), mas você pode definir esse valor de um dia (1.440 minutos) a sete dias (10.080 minutos). Seu cluster de banco de dados do Aurora PostgreSQL deve ter armazenamento suficiente para armazenar os arquivos de log durante o período.

Recomendamos que você publique habitualmente seus logs no Amazon CloudWatch Logs para que possa visualizar e analisar os dados do sistema muito tempo depois que os logs tiverem sido removidos do cluster de banco de dados do Aurora PostgreSQL. Para ter mais informações, consulte Publicar logs do Aurora PostgreSQL no Amazon CloudWatch Logs. Depois que você configura a publicação do CloudWatch, o Aurora não exclui um log enquanto ele não for publicado no CloudWatch Logs.

O Amazon Aurora compacta logs do PostgreSQL mais antigos quando o armazenamento para a instância de banco de dados atinge um limite. O Aurora compacta os arquivos usando o utilitário de compactação gzip. Para ter mais informações, consulte o site do gzip.

Quando a instância de banco de dados estiver com pouco espaço de armazenamento e todos os logs disponíveis estiverem compactados, você receberá um aviso como o seguinte:

Warning: local storage for PostgreSQL log files is critically low for this Aurora PostgreSQL instance, and could lead to a database outage.

Se não houver armazenamento suficiente, o Aurora poderá excluir os logs compactados do PostgreSQL antes do final do período de retenção especificado. Se isso ocorrer, será exibida uma mensagem semelhante à seguinte:

The oldest PostgreSQL log files were deleted due to local storage constraints.

Configurar a alternância do arquivo de log

Por padrão, o Aurora cria arquivos de log a cada hora. O tempo é controlado pelo parâmetro log_rotation_age. Esse parâmetro tem um valor padrão de 60 (minutos), mas você pode definir qualquer valor entre 1 minuto e 24 horas (1.440 minutos). Quando chegar o momento da alternância, será criado um novo arquivo de log distinto. O arquivo é nomeado de acordo com o padrão especificado pelo parâmetro log_filename.

Também é possível alternar os arquivos de log de acordo com o tamanho, conforme especificado no parâmetro log_rotation_size. Esse parâmetro especifica que o log deva ser alternado quando atingir o tamanho determinado (em kilobytes). O valor padrão log_rotation_size é 100 mil kB (kilobytes) para um cluster de banco de dados do Aurora PostgreSQL, mas é possível definir esse valor entre 50 mil e 1 milhão de kilobytes.

Os nomes dos arquivos de log são baseados no padrão de nome do arquivo do parâmetro log_filename. As configurações disponíveis para esse parâmetro são as seguintes:

  • postgresql.log.%Y-%m-%d: formato padrão do nome do arquivo de log. Inclui o ano, o mês e a data no nome do arquivo de log.

  • postgresql.log.%Y-%m-%d-%H: inclui a hora no formato do nome do arquivo de log.

  • postgresql.log.%Y-%m-%d-%H%M: inclui hora:minuto no formato do nome do arquivo de log.

Se você definir o parâmetro log_rotation_age como menos de 60 minutos, defina o parâmetro log_filename como o formato em minutos.

Para ter mais informações, consulte log_rotation_age e log_rotation_size na documentação do PostgreSQL.

Definir o destino dos logs (stderr, csvlog)

Por padrão, o Aurora PostgreSQL gera logs no formato de erro padrão (stderr). Esse formato é a configuração padrão do parâmetro log_destination. Cada mensagem é prefixada usando o padrão especificado no parâmetro log_line_prefix. Para ter mais informações, consulte Noções básicas sobre o parâmetro log_line_prefix.

O Aurora PostgreSQL também pode gerar os registros no formato csvlog. O csvlog é útil para analisar os dados de log como dados de valores separados por vírgula (CSV). Por exemplo, digamos que você use a extensão log_fdw para trabalhar com seus logs como tabelas externas. A tabela externa criada nos arquivos de log do stderr contém uma única coluna com dados de eventos de log. Ao adicionar csvlog ao parâmetro log_destination, você obtém o arquivo de log no formato CSV com demarcações para as várias colunas da tabela externa. Agora você pode classificar e analisar os logs com maior facilidade.

Se você especificar csvlog para esse parâmetro, lembre-se de que os arquivos stderr e csvlog são gerados. Monitore o armazenamento consumido pelos logs, levando em consideração o rds.log_retention_period e outras configurações que afetam o armazenamento e a rotatividade dos logs. O uso de stderr e csvlog mais do que dobra o armazenamento consumido pelos logs.

Se você adicionar csvlog a log_destination e quiser reverter para o stderr, precisará redefinir o parâmetro. Para fazer isso, use o console do Amazon RDS e, depois, abra o grupo de parâmetros do cluster de banco de dados para sua instância. Selecione o parâmetro log_destination, Edit parameter (Editar parâmetro) e depois Reset (Redefinir).

Para ter mais informações sobre como configurar o registro em log, consulte Trabalhar com logs do Amazon RDS e do Aurora PostgreSQL: parte 1.

Noções básicas sobre o parâmetro log_line_prefix

O formato de log stderr prefixa cada mensagem de log com os detalhes especificados pelo parâmetro log_line_prefix, da seguinte forma.

%t:%r:%u@%d:[%p]:t

Você não pode alterar essa configuração. Cada entrada de log enviada a stderr inclui as informações a seguir.

  • %t: hora da entrada do log.

  • %r: endereço do host remoto.

  • %u@%d: nome de usuário no nome do banco de dados.

  • [%p]: ID do processo, se disponível.