本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。
数据托管环境参考架构
发布日期:2022年 5月13日 (图表历史)
该架构展示了如何构建数据托管环境。您可以在发布商和广告商之间安全地存储、共享和访问数据。
数据托管环境参考架构
-
发布商账户将特定于每个广告商的数据存储在 Amazon S3 对象存储中。
-
转换后的 Amazon S3 对象存储中的数据存储。
-
数据通过使用亚马逊 EMR 或 G AWS lue 等服务进行转换过程。
-
本地治理和监控系统对这些 S3 存储桶进行管理和编目。这使用了 AWS Glue 目录 CloudTrail、湖泊形成和 CloudWatch。
-
本地治理和监控系统对转换后的 S3 存储桶进行编目和管理。
-
资源共享发生在中央治理账户和持有广告商数据的发布商账户之间。出版商控制中央治理账户。
-
中央治理账户提供对发布商账户的访问权限。发布商账户将 Amazon S3 对象转换为不同的广告商账户。
-
广告商客户端应用程序启动了整合发布商数据的过程。
-
亚马逊管理工作流程用于Apache Airflow创建用于转换的 Airflow DAG。
-
转换过程从包含广告商数据的本地 S3 存储桶中提取数据。
-
转换过程可以访问发布商账户的相关数据。它使用中央治理和元数据访问层。
-
来自两个账户的转换和合并数据存储在最终的 S3 存储桶中。
-
亚马逊 S3 数据导出到亚马逊 Redshift 或直接使用或亚马逊 Redshift Spectrum 进行查询。
-
亚马逊 Quick Sight 可访问在 Amazon Redshift Spectrum 中创建的
-
分析师访问仪表板和见解。
延伸阅读
有关其他信息,请参阅
图表历史
要获得有关此参考架构图更新的通知,请订阅 RSS 提要。
| 变更 | 说明 | 日期 |
|---|---|---|
初次发布 | 参考架构图首次发布。 | 2022 年 5 月 13 日 |
注意
要订阅 RSS 更新,必须为正在使用的浏览器启用 RSS 插件。