Análise de dados de registro com o CloudWatch Logs Insights

Uma linguagem de consulta específica do Logs Insights (Logs Insights QL) com alguns comandos simples, mas poderosos.

(Novo) OpenSearch Service Piped Processing Language (PPL). OpenSearch O PPL permite que você analise seus registros usando um conjunto de comandos delimitados por canais (|).

Com o OpenSearch PPL, você pode recuperar, consultar e analisar dados usando comandos que são agrupados, facilitando a compreensão e a composição de consultas complexas. A sintaxe permite o encadeamento de comandos para transformar e processar dados. Com o PPL, você pode filtrar e agregar dados e usar um rico conjunto de funções matemáticas, de seqüências de caracteres, de data, condicionais e outras para análise.

(Novo) OpenSearch Service Structured Query Language (SQL). Com as consultas OpenSearch SQL, você pode analisar seus registros de forma declarativa. Você pode usar comandos como SELECT, FROM, WHERE, GROUP BY, HAVING e vários outros comandos e funções disponíveis no SQL. Você pode executar JOINs vários grupos de registros, correlacionar dados entre registros usando subconsultas e usar o rico conjunto de funções JSON, Mathematical, String, Conditional e outras funções SQL para realizar análises poderosas em registros.

Descoberta automática de campos de log em registros de AWS serviços como Amazon Route 53,, AWS Lambda AWS CloudTrail, e Amazon VPC, e qualquer aplicativo ou log personalizado que emita eventos de log como JSON.

Criação de índices de campo para reduzir custos e acelerar os resultados, especialmente para consultas de um grande número de grupos de registros ou eventos de registro. Depois de criar índices de campos que são comuns em seus eventos de log, você pode usá-los em uma consulta. A consulta ignora o processamento de eventos de log que se sabe que não incluem o campo indexado e processa menos dados.

Detecção e análise de padrões em seus eventos de log. Um padrão é uma estrutura de texto compartilhada que se repete nos campos do log. Ao visualizar os resultados de uma consulta, você pode escolher a guia Padrões para ver os padrões que o CloudWatch Logs encontrou com base em uma amostra dos seus resultados.

Salvando consultas, vendo seu histórico de consultas e reexecutando consultas salvas. Isso pode ajudá-lo a realizar consultas complexas quando precisar, sem ter de recriá-las sempre que quiser executá-las.

Adicionar consultas aos painéis.

Criptografando os resultados da consulta com AWS Key Management Service.

Geração de consultas usando linguagem natural.

Consultando registros na classe de registro de acesso infrequente.

Consultas de comparação que comparam eventos de log em um grupo de logs com eventos de log de um período anterior.

O filterIndexcomando, que força a consulta a tentar verificar somente eventos de log que contenham um índice de campo especificado por você.