View a markdown version of this page

在 上擴展地理空間資料湖 AWS - 在 上擴展地理空間資料湖 AWS

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

在 上擴展地理空間資料湖 AWS

發佈日期:2023 年 8 月 14 日 (圖表歷史記錄)

地理空間資料的儲存庫在許多組織中變得越來越重要 – 用於從物流和保險到供應鏈最佳化的所有項目。此參考架構說明如何在 上建置可擴展的地理空間資料儲存庫 AWS。它簡化了地理空間資料管道的設計,透過整合 上的開放資料登錄檔中的 AWS受管資料集來允許加速存取原始資料,無需將其存放在資料湖中。 AWS它與各種傳播機制整合,並支援各種處理需求。

在 AWS 圖表上擴展地理空間資料湖

顯示如何建置可擴展地理空間資料儲存庫的參考架構圖 AWS。
  1. 根據新的場景偵測啟動資料擷取管道。  使用適當的篩選條件,為受管資料集訂閱 Amazon Simple Notification Service (Amazon SNS) 主題。

    您可以使用 Amazon CloudWatch 規則設定以時間為基礎的事件,在特定時段內開始擷取。

  2. AWS Lambda 會查詢個別資料集的 SpatioTemporal Asset Catalogs (STAC) API,以取得產品詳細資訊。它會透過 啟動資料處理管道AWS Step Functions。

  3. Step Functions 會協調處理任務。您可以根據任務特性和需求來設定平行或循序處理。

  4. Amazon Elastic Container Service (Amazon ECS) 執行容器化任務以:

    • 從 上的開放資料登錄檔上託管的資料集下載產品 AWS。

    • 處理 (裁剪和 geomosiac) 關注區域的圖磚,並將其存放在 Amazon Simple Storage Service (Amazon S3) aoi 處理過的儲存貯體中。建置中繼資料並將其存放在 Amazon DynamoDB 中。使用 PostGIS 擴充功能將向量資料儲存在 Amazon Aurora Postgres 中。

  5. Step Functions 使用 Amazon SageMaker AI 啟動下一個處理任務。

  6. SageMaker AI 託管的 ML 模型執行雲端移除和頻帶數學。

  7. Amazon WorkSpaces 託管的 GIS 工作台可用於視覺化。資料會存放在 Amazon S3 預先處理的儲存貯體中。

深入閱讀

如需詳細資訊,請參閱

貢獻者

此參考架構圖的貢獻者包括:

  • Ajit Rajdeosingh,Amazon Web Services 資深解決方案架構師

圖表歷史記錄

若要收到此參考架構圖的更新通知,請訂閱 RSS 摘要。

變更描述日期

初次出版

首先發佈參考架構圖。

2023 年 8 月 14 日

注意

若要訂閱 RSS 更新,您必須為正在使用的瀏覽器啟用 RSS 外掛程式。