データリポジトリの概要

Amazon FSx for Lustre をデータリポジトリで使用する場合、自動インポートおよびデータリポジトリのインポートタスクを使用して、高パフォーマンスのファイルシステムで大量のファイルデータを取り込み、処理できます。同時に、データリポジトリの自動エクスポートまたはエクスポートタスクを使用して、結果をデータリポジトリに書き込むことができます。この方法を使用することで、データリポジトリに保存されている最新のデータを使用して、いつでもワークロードを再起動できます。

FSx for Lustre は Amazon S3 と緊密に統合されています。この統合により、Amazon FSx ファイルシステムをマウントするアプリケーションから Amazon S3 バケットに保存されているオブジェクトにシームレスにアクセスできます。また、AWS クラウド の Amazon EC2 インスタンスでコンピューティング集約型のワークロードを実行し、ワークロードの完了後に結果をデータリポジトリにエクスポートすることもできます。

Amazon S3 データリポジトリ内のオブジェクトにファイルシステム上のファイルおよびディレクトリとしてアクセスするには、ファイルおよびディレクトリのメタデータをファイルシステムにロードする必要があります。データリポジトリの関連付けを作成するときに、リンクされたデータリポジトリからメタデータをロードできます。

また、自動インポートまたはデータリポジトリのインポートタスクを使用して、リンクされたデータリポジトリからファイルシステムにファイルおよびディレクトリのメタデータをインポートすることもできます。データリポジトリの関連付けで自動インポートを有効にすると、S3 データリポジトリでファイルが作成、変更、または削除されたときに、ファイルシステムによってファイルのメタデータが自動的にインポートされます。または、データリポジトリのインポートタスクを使用して、新しいファイルまたは変更されたファイルとディレクトリのメタデータをインポートすることもできます。

また、自動エクスポートまたはデータリポジトリのエクスポートタスクを使用して、ファイルおよびそれに関連するメタデータをデータリポジトリにエクスポートすることもできます。データリポジトリの関連付けで自動エクスポートを有効にすると、ファイルデータおよびメタデータが作成、変更、または削除されたときに、ファイルシステムによってファイルデータとメタデータが自動的にエクスポートされます。また、データリポジトリのエクスポートタスクを使用して、ファイルまたはディレクトリをエクスポートすることもできます。データリポジトリのエクスポートタスクを使用すると、そのような最後のタスク以降に作成または変更されたファイルデータとメタデータがエクスポートされます。

FSx for Lustre は、オンプレミスのファイルシステムを使用するクラウドでのバーストワークロードもサポートしており、AWS Direct Connect または VPN を使用するオンプレミスクライアントからデータをコピーすることができます。

リンクされた S3 バケットのリージョンとアカウントのサポート

S3 バケットへのリンクを作成するときは、次のリージョンとアカウントのサポートの制限に注意してください。