でデータメッシュベースのエンタープライズソリューションを構築するための戦略 AWS

Dhrubajyoti Mukherjee、Adjoa Taylor、Siva Venkat、Amazon Web Services (AWS）

2024 年 4 月 (ドキュメント履歴 )

アマゾン ウェブ サービス (AWS) のお客様は、あらゆる規模の膨大な量とタイプのデータを生成しています。このデータを管理するために、多くの組織が中央データレイクを構築して、顧客に価値を提供し、ビジネスをより効果的に運営するための収集、保存、処理、およびアクションを実行しています。多くの場合、中央データチームはデータパイプラインを構築してデータレイクにデータを取り込んで、データへのアクセスを管理します。ただし、データ量が増えるにつれて、データレイクベースのアプローチはそれに合わせてスケーリングされません。さらに、データ作成者とユーザーの数が増えると、データチームはすべてのリクエストを時間内に処理できず、ボトルネックになります。

この問題に対処するために、組織はデータを生成して使用するチームに自律性を提供できます。その後、データクリエーターチームとユーザーチームは、中央データチームに依存することなく、データアセットを管理およびアクセスできます。データ所有権に対する分散型アプローチへの移行には、分散型データソリューションアーキテクチャが必要です。

データメッシュなどのアーキテクチャと組織的なアプローチを使用する分散型データソリューションは、企業がイノベーションを加速し、ビジネス価値を高めるのに役立ちます。データメッシュは、次の 4 つの基本原則に基づいています。

データメッシュの概念と用語の詳細については、「リソース」セクションを参照してください。

このドキュメントでは、 でデータメッシュベースのソリューションを構築するための戦略に焦点を当てています AWS クラウド。CTOsCIOs、CDOs、IT およびビジネスエグゼクティブ、プログラムマネージャー、アーキテクトを対象としています。このドキュメントでは、以下について説明します。