オープンソースパターンを使用したログ分析

アプリケーション、コンテナシステム、および関連サービスはログを生成します。これには、Dockerコンテナ、Kubernetesポッド、Amazon Elastic Compute Cloud インスタンス、Elastic Load Balancer ログ、AWS Lambda、リレーショナルデータベースシステムが含まれます。

FluentBit一般的な Apache ライセンスのログフォワーダーである は、ログファイルを読み取り、HTTP Data Prepper経由で に転送します。

Data Prepper はサーバー側のデータコレクターです。ダウンストリーム分析用にデータをフィルタリング、強化、変換、正規化、集計します。 はログData Prepperを受信し、バッファしてから、オプションで grok プリッパーを介してデータを構造化します。

Data Prepper はサービスマップを作成し、トレースをトレースグループにアセンブルします。次に、検索と分析を容易にするためにフォーマットされたログ行を に送信しますhttps://docs.aws.amazon.com/opensearch-service/latest/developerguide/what-is.html。

ユーザーは OpenSearch Dashboards (または などの別のオープンソース可視化ツールGrafana) にログインして、インタラクティブなログ分析を実行します。