View a markdown version of this page

开启扩展地理空间数据湖 AWS - 开启扩展地理空间数据湖 AWS
开启扩展地理空间数据湖 AWS 示意图延伸阅读贡献者图表历史

本文属于机器翻译版本。若本译文内容与英语原文存在差异，则一律以英文原文为准。

开启扩展地理空间数据湖 AWS

发布日期：2023 年 8 月 14 日 (图表历史)

地理空间数据存储库在许多组织中变得越来越重要，可用于从物流、保险到供应链优化的所有领域。此参考架构向您展示了如何在上 AWS构建可扩展的地理空间数据存储库。它简化了地理空间数据管道的设计，通过集成开放数据注册表中的 AWS托管数据集来加快对原始数据的访问 AWS，无需将其存储在数据湖中。它集成了各种传播机制，支持不同的处理需求。

开启扩展地理空间数据湖 AWS 示意图

参考架构图显示了如何在上 AWS构建可扩展的地理空间数据存储库。

  1. 基于新场景检测启动数据摄取管道。  使用适当的筛选条件订阅有关托管数据集的亚马逊简单通知服务 (Amazon SNS) 主题。

    可以使用 Amazon CloudWatch 规则配置基于时间的事件，使其在特定时间段内开始摄取。

  2. AWS Lambda查询相应数据集的SpatioTemporal 资产目录 (STAC) API 以获取产品详细信息。它通过AWS Step Functions启动数据处理管道。

  3. Step Funct ions 协调处理任务。可以根据任务特征和要求配置并行或顺序处理。

  4. 亚马逊弹性容器服务 (Amazon ECS) 运行容器化任务以：

    • 从开放数据注册表托管的数据集中下载产品 AWS。

    • 将图块处理（裁剪和地理镶嵌）到感兴趣的区域，并将它们存储在亚马逊简单存储服务 (Amazon S3) 经过人工智能处理的存储桶中。生成元数据并将其存储在亚马逊 DynamoDB 中。使用 PostGIS 扩展将矢量数据存储在亚马逊 Aurora Postgres 中。

  5. Step Functions 使用亚马逊 SageMaker AI 启动下一个处理任务。

  6. SageMaker AI 托管的 ML 模型执行云移除和波段数学运算。

  7. 亚马逊 WorkSpaces托管的 GIS 工作台可用于可视化。数据存储在 Amazon S3 预处理的存储桶中。

延伸阅读

有关其他信息，请参阅

贡献者

此参考架构图的贡献者包括：

  • Ajit Rajdeosingh，亚马逊网络服务高级解决方案架构师

图表历史

要获得有关此参考架构图更新的通知，请订阅 RSS 提要。

变更说明日期

初次发布

参考架构图首次发布。

2023 年 8 月 14 日

注意

要订阅 RSS 更新，必须为正在使用的浏览器启用 RSS 插件。