Refrescar objetos en el bucket de Amazon S3

Abrir la consola de Storage Gateway enhttps://console.aws.amazon.com/storagegateway/home.

Elija File shares (Recursos compartidos de archivos) y, a continuación, elija el recurso compartido de archivos asociado al bucket de S3 que desea actualizar.

En Actions (Acciones), elija Refresh cache (Actualizar caché).

El tiempo que tarda el proceso de actualización depende del número de objetos almacenados en la memoria caché de la gateway y del número de objetos que se han añadido o eliminado del bucket de S3.

Identifique el bucket de S3 utilizado por S3 File Gateway.

Compruebe que lasEventoestá en blanco. Se rellena automáticamente más tarde.

Crear un rol de IAM y permitir la relación de confianza para Lambdalambda.amazonaws.com.

Utilice la siguiente política de.

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Sid": "StorageGatewayPermissions",
            "Effect": "Allow",
            "Action": "storagegateway:RefreshCache",
            "Resource": "*"
        },
        {
            "Sid": "CloudWatchLogsPermissions",
            "Effect": "Allow",
            "Action": [
                "logs:CreateLogStream",
                "logs:CreateLogGroup",
                "logs:PutLogEvents"
            ],
            "Resource": "*"
        }
    ]
}                

Cree una función Lambda desde la consola de Lambda.

Utilice la siguiente función para la tarea Lambda.

import json
import boto3
client = boto3.client('storagegateway')
def lambda_handler(event, context):
    print(event)
    response = client.refresh_cache(
        FileShareARN='arn:aws:storagegateway:ap-southeast-2:672406774878:share/share-E51FBD9C'
    )
    print(response)
    return 'Your FileShare cache has been refreshed'                

ParaRol de ejecución, elija el rol de IAM que creó.

Opcional: agregue un activador para Amazon S3 y seleccione el eventoObjectCreatedoObjectRemoved.

Cree una regla de CloudWatch en la consola de CloudWatch y agregue una programación. En general, recomendamos unTipo fijode 30 minutos. Sin embargo, puede usar de 1 a 2 horas en un cubo S3 grande.

Agregue un nuevo activador para eventos de CloudWatch y elija la regla que acaba de crear.

Guarde la configuración de Lambda. Seleccione Test (Probar).

ElegirS3 PUTy personaliza la prueba según tus necesidades.

La prueba debería realizarse correctamente. Si no, modifique el JSON según sus requisitos y vuelva a realizar la prueba.

Abra la consola de Amazon S3 y compruebe que el evento que creó y el ARN de la función Lambda están presentes.

Cargue un objeto en el bucket de S3 utilizando la consola de Amazon S3 o laAWS CLI.

La consola de CloudWatch genera un resultado de CloudWatch similar al siguiente.

{
    u'Records': [
        {u'eventVersion': u'2.0', u'eventTime': u'2018-09-10T01:03:59.217Z', u'requestParameters': {u'sourceIPAddress': u'MY-IP-ADDRESS'}, 
        u's3': {u'configurationId': u'95a51e1c-999f-485a-b994-9f830f84769f', u'object': {u'sequencer': u'00549CC2BF34D47AED', u'key': u'new/filename.jpeg'}, 
        u'bucket': {u'arn': u'arn:aws:s3:::MY-BUCKET', u'name': u'MY-GATEWAY-NAME', u'ownerIdentity': {u'principalId': u'A3OKNBZ72HVPP9'}}, u's3SchemaVersion': u'1.0'}, 
        u'responseElements': {u'x-amz-id-2': u'76tiugjhvjfyriugiug87t890nefevbck0iA3rPU9I/s4NY9uXwtRL75tCyxasgsdgfsq+IhvAg5M=', u'x-amz-request-id': u'651C2D4101D31593'}, 
        u'awsRegion': u'MY-REGION', u'eventName': u'ObjectCreated:PUT', u'userIdentity': {u'principalId': u'AWS:AROAI5LQR5JHFHDFHDFHJ:MY-USERNAME'}, u'eventSource': u'aws:s3'}
    ]
}                

La invocación Lambda proporciona un resultado similar al siguiente.

{
    u'FileShareARN': u'arn:aws:storagegateway:REGION:ACCOUNT-ID:share/MY-SHARE-ID', 
        'ResponseMetadata': {'RetryAttempts': 0, 'HTTPStatusCode': 200, 'RequestId': '6663236a-b495-11e8-946a-bf44f413b71f', 
            'HTTPHeaders': {'x-amzn-requestid': '6663236a-b495-11e8-946a-bf44f413b71f', 'date': 'Mon, 10 Sep 2018 01:03:59 GMT', 
                'content-length': '90', 'content-type': 'application/x-amz-json-1.1'
        }
    }
}                

El recurso compartido de NFS montado en su cliente reflejará esta actualización.

Elimine el objeto manualmente mediante la consola de Amazon S3 oAWS CLI.

Vea el recurso compartido de NFS montado en su cliente. Compruebe que el objeto ha desaparecido (porque la caché se ha actualizado).

Compruebe los registros de CloudWatch para ver el registro de su eliminación con el eventoObjectRemoved:Delete.

{
    u'account': u'MY-ACCOUNT-ID', u'region': u'MY-REGION', u'detail': {}, u'detail-type': u'Scheduled Event', u'source': u'aws.events', 
    u'version': u'0', u'time': u'2018-09-10T03:42:06Z', u'id':  u'6468ef77-4db8-0200-82f0-04e16a8c2bdb', 
    u'resources': [u'arn:aws:events:REGION:MY-ACCOUNT-ID:rule/FGw-RefreshCache-CW']
}