Amazon S3 バケットをリクエスタが支払うように設定すると、クエリに関連するデータアクセス料金とデータ転送料金がクエリを実行したユーザーのアカウントに請求されます。詳細については、「Amazon S3 ユーザーガイド」の「ストレージ転送と使用量のリクエスタ支払いバケットの使用」を参照してください。
Athena for Spark では、リクエスタ支払いバケットがワークグループごとではなく、セッションごとに有効化されます。リクエスタ支払いバケットを有効にする大まかな手順は次のとおりです。
-
Amazon S3 コンソールで、バケットのプロパティに対するリクエスタによる支払いを有効にし、アクセスを指定するバケットポリシーを追加します。
-
IAM コンソールで、バケットへのアクセスを許可する IAM ポリシーを作成し、そのポリシーをリクエスタ支払いバケットへのアクセスに使用する IAM ロールにアタッチします。
-
Athena for Spark では、セッションプロパティを追加してリクエスタによる支払い機能を有効にします。
ステップ 1: Amazon S3 バケットでリクエスタ支払いを有効にし、バケットポリシーを追加する
Amazon S3 バケットのリクエスタ支払いを有効にするには
https://console.aws.amazon.com/s3/
で Amazon S3 コンソールを開きます。 -
バケットのリストで、リクエスタ支払いを有効にするバケットのリンクを選択します。
-
バケットのページで、[プロパティ] タブを選択します。
-
[リクエスタ支払い] セクションまで下にスクロールし、[編集] を選択します。
-
[リクエスタ支払いを編集] ページで、[有効化] を選択し、[変更の保存] を選択します。
-
[アクセス許可] タブを選択します。
-
[バケットポリシー] セクションで、[編集] を選択します。
-
[バケットポリシーを編集] ページで、必要なバケットポリシーをソースバケットに適用します。以下のポリシー例では、すべての AWS プリンシパル (
"AWS": "*") へのアクセスを許可していますが、アクセスをより細かく設定することもできます。例えば、別のアカウントの特定の IAM ロールのみを指定したい場合があります。{ "Version": "2012-10-17", "Statement": [ { "Sid": "Statement1", "Effect": "Allow", "Principal": { "AWS": "*" }, "Action": "s3:*", "Resource": [ "arn:aws:s3:::account_number-us-east-1-my-s3-requester-pays-bucket", "arn:aws:s3:::account_number-us-east-1-my-s3-requester-pays-bucket/*" ] } ] }
ステップ 2: IAM ポリシーを作成して、それを IAM ロールにアタッチします。
次に、バケットへのアクセスを許可する IAM ポリシーを作成します。次に、リクエスタ支払いバケットへのアクセスに使用されるロールにポリシーをアタッチします。
リクエスタ支払いバケット用の IAM ポリシーを作成し、そのポリシーをロールにアタッチするには
IAM コンソール (https://console.aws.amazon.com/iam/
) を開きます。 -
IAM コンソールのナビゲーションペインで、[ポリシー] を選択します。
-
[Create policy] を選択します。
-
[JSON] を選択します。
-
[ポリシーエディタ] で、以下のポリシーを追加します。
{ "Version": "2012-10-17", "Statement": [ { "Action": [ "s3:*" ], "Effect": "Allow", "Resource": [ "arn:aws:s3:::account_number-us-east-1-my-s3-requester-pays-bucket", "arn:aws:s3:::account_number-us-east-1-my-s3-requester-pays-bucket/*" ] } ] } -
[Next] を選択します。
-
[確認と作成] ページで、ポリシーの 名前とオプションの説明を入力し、[ポリシーの作成] を選択します。
-
ナビゲーションペインで Roles (ロール) を選択します。
-
[ロール] ページで、使用したいロールを見つけて、ロール名のリンクを選択します。
-
[アクセス許可ポリシー] で、[アクセス許可を追加] と [ポリシーをアタッチ] を続けて選択します。
-
[その他の許可ポリシー] セクションで、作成したポリシーのチェックボックスをオンにし、[アクセス許可を追加] を選択します。
ステップ 3: Athena for Spark セッションプロパティを追加する
Amazon S3 バケットとリクエスタ支払いに関連するアクセス許可を設定した後、Athena for Spark セッションでこの機能を有効にできます。
Athena for Spark セッションでリクエスタ支払いバケットを有効にするには
-
ノートブックエディタで、右上の [Session] (セッション) メニューから [Edit session] (セッションの編集) を選択します。
-
[Spark のプロパティ] を拡張します。
-
[JSON で編集] を選択します。
-
JSON テキストエディタで、以下を入力します。
{ "spark.hadoop.fs.s3.useRequesterPaysHeader":"true" } -
[保存] を選択します。
