Analisi dei dati di registro con CloudWatch Logs Insights

Un linguaggio di interrogazione Logs Insights creato appositamente (Logs Insights QL) con pochi comandi semplici ma potenti.

OpenSearch Service Piped Processing Language (PPL). OpenSearch PPL consente di analizzare i log utilizzando una serie di comandi delimitati da pipe (|).

Con OpenSearch PPL è possibile recuperare, interrogare e analizzare i dati utilizzando comandi raggruppati tra loro, facilitando la comprensione e la composizione di interrogazioni complesse. La sintassi consente il concatenamento di comandi per trasformare ed elaborare i dati. Con PPL, puoi filtrare e aggregare i dati e utilizzare un ricco set di funzioni matematiche, stringhe, date, condizionali e di altro tipo per l'analisi.

OpenSearch Service Structured Query Language (SQL). Con le query OpenSearch SQL, puoi analizzare i tuoi log in modo dichiarativo. È possibile utilizzare comandi come SELECT, FROM, WHERE, GROUP BY, HAVING e vari altri comandi e funzioni disponibili in SQL. È possibile eseguire JOIN tra gruppi di log, correlare i dati tra i log utilizzando sottoquery e utilizzare il ricco set di funzioni JSON, Mathematical, String, Conditional e altre funzioni SQL per eseguire potenti analisi sui log.

Quando utilizzi comandi SQL o PPL, assicurati di racchiudere i campi con caratteri speciali (non alfabetici e non numerici) tra parentesi inverse per interrogarli correttamente. Ad esempio, racchiudi e tra i backtick. @message Operation.Export Test::Field Non è necessario racchiudere i campi con nomi puramente alfabetici nei backtick.

Rilevamento automatico dei campi di registro nei log di AWS servizi come Amazon Route 53 AWS Lambda, AWS CloudTrail, e Amazon VPC e qualsiasi applicazione o registro personalizzato che emette eventi di registro come JSON.

Creazione di indici di campo per ridurre i costi e velocizzare i risultati, in particolare per le interrogazioni su un numero elevato di gruppi di log o di eventi di log. Dopo aver creato gli indici dei campi comuni negli eventi di registro, è possibile utilizzarli in una query. La query ignora l'elaborazione degli eventi di registro noti per non includere il campo indicizzato ed elabora meno dati.

Rilevamento e analisi dei pattern nei tuoi eventi di registro. Un pattern è una struttura di testo condivisa che ricorre tra i campi del registro. Quando visualizzi i risultati di una query, puoi scegliere la scheda Pattern per visualizzare i pattern trovati dai CloudWatch log in base a un campione dei tuoi risultati.

Salvataggio delle query , visualizzazione della cronologia delle query, riesecuzione delle query salvate e utilizzo delle query salvate con parametri.

Aggiungere query alle dashboard.

Crittografia dei risultati delle query con. AWS Key Management Service

La generazione di query utilizzando il linguaggio naturale consente di utilizzare il linguaggio naturale per creare query CloudWatch Logs Insights. Puoi porre domande o descrivere i dati che stai cercando, quindi l'IA genera una query in base alla tua richiesta e fornisce una spiegazione riga per riga di come funziona la query.

Usa i facet per raggruppare, filtrare ed esplorare in modo interattivo i tuoi log.

I registri circostanti consentono di visualizzare le righe di registro prima e dopo ogni record di registro specifico nei risultati della query per ottenere un contesto immediato degli eventi di registro critici. È possibile configurare l'intervallo per visualizzare 5, 10, 20, 50 o 100 righe di log prima e dopo un record selezionato e cercare parole chiave specifiche nei log circostanti.

Query di confronto che confrontano gli eventi di log in un gruppo di log con gli eventi di log di un periodo di tempo precedente.