View a markdown version of this page

使用开源模式进行日志分析 - 使用开源模式进行日志分析

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

使用开源模式进行日志分析

发布日期:2022年 12月13日 (图表历史)

此架构使用FluentBit和Data Prepper来收集、聚合日志并将其转换为 OpenSearch。

使用开源模式进行日志分析

架构图显示了使用FluentBit和进行开源模式的日志分析Data Prepper。
  1. 应用程序、容器系统和相关服务生成日志。其中包括Docker容器、容Kubernetes器、亚马逊弹性计算云实例、弹性负载均衡器日志和关系数据库系统。AWS Lambda

  2. FluentBit,一种流行的 Apache-licensed 日志转发器,它读取日志文件并Data Prepper通过 HTTP 将其转发到。

  3. Data Prepper是服务器端数据收集器。它筛选、丰富、转换、标准化和聚合数据,用于下游分析。Data Prepper接收日志,对其进行缓冲,然后有选择地通过 grok prepper 来构造数据。

  4. Data Prepper创建服务地图并将追踪汇编成追踪组。然后,它会将格式化为便于搜索和分析的日志行发送到https://docs.aws.amazon.com/opensearch-service/latest/developerguide/what-is.html

  5. 用户登录 OpenSearch 控制面板(或其他开源可视化工具,例如Grafana)以执行交互式日志分析。

延伸阅读

有关其他信息,请参阅

图表历史

要获得有关此参考架构图更新的通知,请订阅 RSS 提要。

变更说明日期

初次发布

参考架构图首次发布。

2022 年 12 月 13 日

注意

要订阅 RSS 更新,必须为正在使用的浏览器启用 RSS 插件。