Ablauf des Datensatzes für Tabellen

Standardmäßig laufen Datensätze in Ihren S3-Tabellen nicht ab. Um die Speicherkosten für Ihre Tabellen zu minimieren, können Sie den Ablauf von Datensätzen für die Tabellen aktivieren und konfigurieren. Mit dieser Option entfernt Amazon S3 automatisch Datensätze aus einer Tabelle, wenn die Datensätze ablaufen.

Wenn Sie das Ablaufen von Datensätzen für eine Tabelle aktivieren, geben Sie an, wie viele Tage Datensätze in der Tabelle aufbewahrt werden sollen, bevor die Datensätze ablaufen. Dies kann eine beliebige Anzahl von Tagen zwischen 1 Tag und 2.147.483.647 Tagen sein. Um beispielsweise Tabellendatensätze ein Jahr lang aufzubewahren, geben Sie Tage an. 365 Die Datensätze bleiben dann 365 Tage lang bestehen. Nach 365 Tagen laufen die Datensätze ab und Amazon S3 entfernt sie automatisch.

Sie können den Ablauf von Datensätzen für AWS verwaltete Tabellen aktivieren und konfigurieren, die bestimmte Datensätze aus bestimmten AWS-Services, derzeit Amazon S3 Storage Lens und Amazon SageMaker Catalog, speichern. Für andere AWS verwaltete Tabellen sind derzeit keine Optionen für den Ablauf von Datensätzen verfügbar. Die Ausnahme bilden Amazon S3-Metadaten-Journaltabellen. Journaltabellen verwenden unterschiedliche Einstellungen für den Ablauf von Datensätzen, die Sie auf Serviceebene angeben. Hinweise zur Konfiguration des Ablaufs von Datensätzen für diesen Tabellentyp finden Sie unterAblauf von Journaltabellen-Datensätzen. Beachten Sie, dass Optionen für den Ablauf von Datensätzen für von Ihnen erstellte S3-Tabellen nicht verfügbar sind.

Nachdem Sie das Ablaufen von Datensätzen für eine Tabelle aktiviert haben, können Sie es jederzeit deaktivieren. Amazon S3 läuft dann nicht mehr ab und entfernt keine Datensätze mehr aus der Tabelle.

Wie funktioniert das Ablaufen von Datensätzen

Beim Ablauf von Datensätzen werden automatisch Datensätze aus einer S3-Tabelle entfernt, wenn die Datensätze älter sind als die Anzahl von Tagen, die Sie in den Einstellungen für das Datensatzablaufen für die Tabelle angegeben haben. Um zu ermitteln, wann Datensätze ablaufen, verwendet Amazon S3 bestimmte Zeitstempel in den Datensätzen. Die Auswahl der Zeitstempelspalte ergibt sich direkt aus dem Tabellenschema für eine Tabelle. Sie müssen nicht angeben, welche Zeitstempelspalte verwendet werden soll. Die Tabellen werden von verwaltet AWS und Amazon S3 wählt automatisch die entsprechende Spalte aus, die verwendet werden soll, wenn Sie das Ablaufen von Datensätzen für eine Tabelle aktivieren.

Sie können Einstellungen für den Ablauf von Datensätzen für AWS verwaltete Tabellen aktivieren und konfigurieren, in denen bestimmte Amazon S3 Storage Lens-Metriken oder bestimmte Amazon SageMaker Catalog-Metadaten gespeichert sind. Optionen für das Ablaufen von Datensätzen sind für die folgenden AWS verwalteten Tabellen für diese Dienste verfügbar:

Nachdem Sie den Ablauf von Datensätzen für eine Tabelle aktiviert haben, beginnt Amazon S3 mit der Ausführung von Aufträgen zum Ablauf von Datensätzen, die die folgenden Operationen für die Tabelle ausführen:

Das Entfernen basiert auch auf dem Ablauf des Snapshots und den Einstellungen zum Entfernen unreferenzierter Dateien in den Wartungskonfigurationseinstellungen für die Tabelle. Weitere Informationen zu diesen Einstellungen finden Sie unterWartung von Tabellen.

Konfiguration des Ablaufs von Datensätzen für eine Tabelle

Sie können die Einstellungen für den Ablauf von Datensätzen für eine S3-Tabelle mithilfe der Amazon S3-Konsole, der Amazon S3-REST-API AWS Command Line Interface (AWS CLI) oder AWS SDKs aktivieren, konfigurieren und anderweitig verwalten.

Bevor Sie versuchen, diese Aufgaben für eine Tabelle auszuführen, stellen Sie sicher, dass Sie über die folgenden AWS Identity and Access Management (IAM-) Berechtigungen verfügen:

In den folgenden Abschnitten wird erläutert, wie Sie die Einstellungen für den Ablauf von Datensätzen für eine Tabelle mithilfe der Amazon S3-Konsole und der aktivieren, konfigurieren und deaktivieren AWS CLI. Verwenden Sie den PutTableRecordExpirationConfiguration Vorgang, um diese Aufgaben mit der Amazon S3-REST-API oder einem AWS SDK auszuführen. Weitere Informationen finden Sie unter Entwickeln mit Amazon S3 in der Amazon Simple Storage Service API-Referenz.

{
    "status": "enabled",
        "settings": {
            "days": 30
        {
}

{
    "status": "disabled"
}

aws s3tables put-table-record-expiration-configuration \
    --table-arn arn:aws:s3tables:us-east-1:123456789012:bucket/amzn-s3-demo-table-bucket/table/amzn-s3-demo-table \
    --value file://./record-expiration-config.json

Überwachen des Ablaufs von Datensätzen für eine Tabelle

Um den Status und die Ergebnisse der Vorgänge zum Ablaufen von Datensätzen für Ihre S3-Tabellen zu überwachen, verwenden Sie den GetTableRecordExpirationJobStatus Vorgang oder, falls Sie den verwenden AWS CLI, führen Sie den get-table-record-expiration-job-status Befehl aus. Geben Sie in Ihrer Anfrage den Amazon-Ressourcennamen (ARN) der Tabelle an.

Mit dem folgenden AWS CLI Befehl wird beispielsweise der Status von Vorgängen zum Ablauf von Datensätzen für eine bestimmte Tabelle in einem Tabellen-Bucket abgerufen. Wenn Sie dieses Beispiel verwenden möchten, ersetzen Sie die user input placeholders (Platzhalter für Benutzereingaben) durch Ihre Informationen.

aws s3tables get-table-record-expiration-job-status \
    --table-arn arn:aws:s3tables:us-east-1:123456789012:bucket/amzn-s3-demo-table-bucket/table/amzn-s3-demo-table

Wenn Ihre Anfrage erfolgreich ist, erhalten Sie eine Antwort mit Details, z. B. wann Amazon S3 zuletzt Vorgänge zum Ablaufen von Datensätzen für die Tabelle ausgeführt hat, und den Status dieser Ausführung. Wenn der letzte Lauf erfolgreich war, enthält die Antwort auch Verarbeitungsmetriken — zum Beispiel die Anzahl der Datendateien und Datensätze, die entfernt wurden, und die Gesamtgröße der Daten, die entfernt wurden. Wenn bei der letzten Ausführung Fehler aufgetreten sind, enthält die Antwort eine Fehlermeldung, in der beschrieben wird, warum der Rechenlauf fehlgeschlagen ist.

Überlegungen

Beachten Sie beim Konfigurieren und Verwalten der Einstellungen für den Ablauf von Datensätzen für Ihre AWS verwalteten S3-Tabellen Folgendes: