View a markdown version of this page

数据托管环境参考架构 - 数据托管环境参考架构

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

数据托管环境参考架构

发布日期:2022年 5月13日 (图表历史)

该架构展示了如何构建数据托管环境。您可以在发布商和广告商之间安全地存储、共享和访问数据。

数据托管环境参考架构

架构图显示了发布商和广告商的数据托管环境。 AWS
  1. 发布商账户将特定于每个广告商的数据存储在 Amazon S3 对象存储中。

  2. 转换后的 Amazon S3 对象存储中的数据存储。

  3. 数据通过使用亚马逊 EMR 或 G AWS lue 等服务进行转换过程。

  4. 本地治理和监控系统对这些 S3 存储桶进行管理和编目。这使用了 AWS Glue 目录 CloudTrail、湖泊形成和 CloudWatch。

  5. 本地治理和监控系统对转换后的 S3 存储桶进行编目和管理。

  6. 资源共享发生在中央治理账户和持有广告商数据的发布商账户之间。出版商控制中央治理账户。

  7. 中央治理账户提供对发布商账户的访问权限。发布商账户将 Amazon S3 对象转换为不同的广告商账户。

  8. 广告商客户端应用程序启动了整合发布商数据的过程。

  9. 亚马逊管理工作流程用于Apache Airflow创建用于转换的 Airflow DAG。

  10. 转换过程从包含广告商数据的本地 S3 存储桶中提取数据。

  11. 转换过程可以访问发布商账户的相关数据。它使用中央治理和元数据访问层。

  12. 来自两个账户的转换和合并数据存储在最终的 S3 存储桶中。

  13. 亚马逊 S3 数据导出到亚马逊 Redshift 或直接使用或亚马逊 Redshift Spectrum 进行查询。

  14. 亚马逊 Quick Sight 可访问在 Amazon Redshift Spectrum 中创建的

  15. 分析师访问仪表板和见解。

延伸阅读

有关其他信息,请参阅

图表历史

要获得有关此参考架构图更新的通知,请订阅 RSS 提要。

变更说明日期

初次发布

参考架构图首次发布。

2022 年 5 月 13 日

注意

要订阅 RSS 更新,必须为正在使用的浏览器启用 RSS 插件。