Verwenden von Amazon S3 S3-Tabellen mit AWS Analysediensten

1. Öffnen Sie die Amazon S3 S3-Konsole unter https://console.aws.amazon.com/s3/.

2. Wählen Sie im linken Navigationsbereich Tabellen-Buckets aus.

3. Wählen Sie Tabellen-Bucket erstellen aus.

   Anschließend wird die Seite Tabellen-Bucket erstellen geöffnet.

4. Geben Sie einen Tabellen-Bucket-Namen ein und achten Sie darauf, dass Integration aktivieren ausgewählt ist.

5. Wählen Sie Tabellen-Bucket erstellen aus. Amazon S3 versucht daraufhin, Ihre Tabellen-Buckets automatisch in diese Region zu integrieren.

Um Tabellen-Buckets mit dem zu integrieren AWS CLI

Die folgenden Schritte zeigen, wie Sie die verwenden können, um Tabellen-Buckets AWS CLI zu integrieren. Wenn Sie dieses Beispiel verwenden möchten, ersetzen Sie die user input placeholders (Platzhalter für Benutzereingaben) durch Ihre Informationen.

1. Einen Tabellen-Bucket erstellen

   aws s3tables create-table-bucket \
   --region us-east-2 \
   --name amzn-s3-demo-table-bucket

2. Erstellen Sie eine IAM-Servicerolle, die Lake Formation Zugriff auf Ihre Tabellenressourcen erteilt.

   1. Erstellen der Rolle

      aws iam create-role \
      --role-name S3TablesRoleForLakeFormation \
      --assume-role-policy-document file://Role-Trust-Policy.json                

      Role-Trust-Policy.json:

      {
          "Version": "2012-10-17",
          "Statement": [
            {
              "Sid": "LakeFormationDataAccessPolicy",
              "Effect": "Allow",
              "Principal": {
                "Service": "lakeformation.amazonaws.com"
              },
              "Action": [
                  "sts:AssumeRole",
                  "sts:SetContext",
                  "sts:SetSourceIdentity"
              ],
              "Condition": {
                "StringEquals": {
                  "aws:SourceAccount": "111122223333"
                }
              }
            }
          ]
      }

   2. Fügen Sie der Rolle eine Richtlinie hinzu.

      aws iam put-role-policy \
      --role-name S3TablesRoleForLakeFormation  \
      --policy-name LakeFormationDataAccessPermissionsForS3TableBucket \
      --policy-document file://LF-GluePolicy.json

      GluePolicyLF-.json:

      {
          "Version": "2012-10-17",
          "Statement": [
              {
                  "Sid": "LakeFormationPermissionsForS3ListTableBucket",
                  "Effect": "Allow",
                  "Action": [
                      "s3tables:ListTableBuckets"
                  ],
                  "Resource": [
                      "*"
                  ]
              },
              {
                  "Sid": "LakeFormationDataAccessPermissionsForS3TableBucket",
                  "Effect": "Allow",
                  "Action": [
                      "s3tables:CreateTableBucket",
                      "s3tables:GetTableBucket",
                      "s3tables:CreateNamespace",
                      "s3tables:GetNamespace",
                      "s3tables:ListNamespaces",
                      "s3tables:DeleteNamespace",
                      "s3tables:DeleteTableBucket",
                      "s3tables:CreateTable",
                      "s3tables:DeleteTable",
                      "s3tables:GetTable",
                      "s3tables:ListTables",
                      "s3tables:RenameTable",
                      "s3tables:UpdateTableMetadataLocation",
                      "s3tables:GetTableMetadataLocation",
                      "s3tables:GetTableData",
                      "s3tables:PutTableData"
                  ],
                  "Resource": [
                      "arn:aws:s3tables:us-east-1:111122223333:bucket/*"
                  ]
              }
          ]
      }

3. Erstellen Sie den s3tablescatalog. Dadurch werden Objekte aufgefüllt, die AWS Glue Data Catalog Tabellen-Buckets, Namespaces und Tabellen entsprechen.

   aws glue create-catalog \
   --region us-east-1 \
   --cli-input-json file://catalog.json

   catalog.json:

   {
      "Name": "s3tablescatalog",
      "CatalogInput": {
         "FederatedCatalog": {
             "Identifier": "arn:aws:s3tables:us-east-1:111122223333:bucket/*",
             "ConnectionName": "aws:s3tables"
          },
          "CreateDatabaseDefaultPermissions":[],
          "CreateTableDefaultPermissions":[]
      }
   }     

4. Tabellen-Buckets bei Lake Formation registrieren

   aws lakeformation register-resource \
   --region us-east-1 \
   --cli-input-json file://input.json

   input.json:

   {
       "ResourceArn": "arn:aws:s3tables:us-east-1:111122223333:bucket/*",
   
       "WithFederation": true,
       "RoleArn": "arn:aws:iam::111122223333:role/S3TablesRoleForLakeFormation"
   }                

5. Vergewissern Sie sich, dass das hinzugefügt s3tablescatalog wurde, AWS Glue indem Sie den folgenden Befehl verwenden.

   aws glue get-catalog --catalog-id s3tablescatalog