Utilizzo di Amazon S3 Tables con AWS servizi di analisi

1. Apri la console Amazon S3 all'indirizzo. https://console.aws.amazon.com/s3/

2. Nel pannello di navigazione a sinistra, scegli Bucket di tabelle.

3. Seleziona Crea bucket di tabelle.

   Viene visualizzata la pagina Create bucket di tabelle.

4. Inserisci il nome di un bucket Table e assicurati che la casella di controllo Abilita integrazione sia selezionata.

5. Seleziona Crea bucket di tabelle. Amazon S3 tenterà di integrare automaticamente i bucket di tabelle in tale Regione.

Per integrare i secchi da tavolo utilizzando il AWS CLI

I passaggi seguenti mostrano come utilizzare i bucket AWS CLI da tavolo per integrare. Per utilizzare questi passaggi, sostituiscili user input placeholders con le tue informazioni.

1. Creare un bucket di tabelle.

   aws s3tables create-table-bucket \
   --region us-east-1 \
   --name amzn-s3-demo-table-bucket

2. Creare un ruolo di servizio IAM che consente a Lake Formation di accedere alle risorse della propria tabella.

   1. Create un file chiamato Role-Trust-Policy.json che contenga la seguente politica di attendibilità:

      {
          "Version": "2012-10-17",
          "Statement": [
            {
              "Sid": "LakeFormationDataAccessPolicy",
              "Effect": "Allow",
              "Principal": {
                "Service": "lakeformation.amazonaws.com"
              },
              "Action": [
                  "sts:AssumeRole",
                  "sts:SetContext",
                  "sts:SetSourceIdentity"
              ],
              "Condition": {
                "StringEquals": {
                  "aws:SourceAccount": "111122223333"
                }
              }
            }
          ]
      }

      Crea il ruolo di servizio IAM utilizzando il seguente comando:

      aws iam create-role \
      --role-name S3TablesRoleForLakeFormation \
      --assume-role-policy-document file://Role-Trust-Policy.json                

   2. Crea un file chiamato LF-GluePolicy.json che contiene la seguente politica:

      {
          "Version": "2012-10-17",
          "Statement": [
              {
                  "Sid": "LakeFormationPermissionsForS3ListTableBucket",
                  "Effect": "Allow",
                  "Action": [
                      "s3tables:ListTableBuckets"
                  ],
                  "Resource": [
                      "*"
                  ]
              },
              {
                  "Sid": "LakeFormationDataAccessPermissionsForS3TableBucket",
                  "Effect": "Allow",
                  "Action": [
                      "s3tables:CreateTableBucket",
                      "s3tables:GetTableBucket",
                      "s3tables:CreateNamespace",
                      "s3tables:GetNamespace",
                      "s3tables:ListNamespaces",
                      "s3tables:DeleteNamespace",
                      "s3tables:DeleteTableBucket",
                      "s3tables:CreateTable",
                      "s3tables:DeleteTable",
                      "s3tables:GetTable",
                      "s3tables:ListTables",
                      "s3tables:RenameTable",
                      "s3tables:UpdateTableMetadataLocation",
                      "s3tables:GetTableMetadataLocation",
                      "s3tables:GetTableData",
                      "s3tables:PutTableData"
                  ],
                  "Resource": [
                      "arn:aws:s3tables:us-east-1:111122223333:bucket/*"
                  ]
              }
          ]
      }

      Associa la policy al ruolo utilizzando il seguente comando:

      aws iam put-role-policy \
      --role-name S3TablesRoleForLakeFormation  \
      --policy-name LakeFormationDataAccessPermissionsForS3TableBucket \
      --policy-document file://LF-GluePolicy.json

3. Create un file chiamato input.json che contenga quanto segue:

   {
       "ResourceArn": "arn:aws:s3tables:us-east-1:111122223333:bucket/*",
   
       "WithFederation": true,
       "RoleArn": "arn:aws:iam::111122223333:role/S3TablesRoleForLakeFormation"
   }                

   Registra i bucket da tavola con Lake Formation utilizzando il seguente comando:

   aws lakeformation register-resource \
   --region us-east-1 \
   --with-privileged-access \
   --cli-input-json file://input.json

4. Crea un file chiamato catalog.json che contiene il seguente catalogo:

   {
      "Name": "s3tablescatalog",
      "CatalogInput": {
         "FederatedCatalog": {
             "Identifier": "arn:aws:s3tables:us-east-1:111122223333:bucket/*",
             "ConnectionName": "aws:s3tables"
          },
          "CreateDatabaseDefaultPermissions":[],
          "CreateTableDefaultPermissions":[]
      }
   }     

   Create il s3tablescatalog catalogo utilizzando il seguente comando. La creazione di questo catalogo lo popola AWS Glue Data Catalog con gli oggetti corrispondenti ai bucket di tabella, ai namespace e alle tabelle.

   aws glue create-catalog \
   --region us-east-1 \
   --allow-full-table-external-data-access \
   --cli-input-json file://catalog.json

5. Verificate che il s3tablescatalog catalogo sia stato aggiunto utilizzando il comando AWS Glue seguente:

   aws glue get-catalog --catalog-id s3tablescatalog

1. Apri la AWS Lake Formation console all'indirizzo https://console.aws.amazon.com/lakeformation/ e accedi come amministratore del data lake. Per ulteriori informazioni su come creare un amministratore di data lake, consulta Create a data lake administrator nella AWS Lake Formation Developer Guide.

2. Eliminate il s3tablescatalog catalogo effettuando le seguenti operazioni:

   • Nel riquadro di navigazione a sinistra, scegli Cataloghi.

   • Seleziona il pulsante di opzione accanto al s3tablescatalog catalogo nell'elenco Cataloghi. Dal menu Actions (Operazioni), scegli Delete (Elimina).

3. Annulla la registrazione della posizione dei dati per il s3tablescatalog catalogo effettuando le seguenti operazioni:

   • Nel riquadro di navigazione a sinistra, vai alla sezione Amministrazione e scegli le posizioni dei Data lake.

   • Seleziona il pulsante di opzione accanto alla posizione del s3tablescatalog data lake, ad esempios3://tables:region:account-id:bucket/*.

   • Nel menu Azioni, scegli Rimuovi.

   • Nella finestra di dialogo di conferma che appare, scegli Rimuovi.

4. Ora che hai eliminato il s3tablescatalog catalogo e la posizione del data lake, puoi seguire i passaggi per integrare i tuoi table bucket con i servizi di AWS analisi utilizzando il processo di integrazione aggiornato.