Schutz der Datenintegrität für Amazon S3

Seit einiger Zeit unterstützen AWS SDKs Datenintegritätsprüfungen beim Hoch- oder Herunterladen von Daten von Amazon Simple Storage Service. Bisher waren diese Prüfungen optional. Jetzt haben wir diese Prüfungen standardmäßig aktiviert und CRC-based Algorithmen wie CRC32 oder CRC64NVME verwendet. Obwohl jedes SDK oder Tool einen Standardalgorithmus hat, können Sie einen anderen Algorithmus wählen. Sie können auch weiterhin manuell eine vorberechnete Prüfsumme für Uploads angeben, wenn Sie möchten. Das konsistente Verhalten bei Uploads, mehrteiligen Uploads, Downloads und Verschlüsselungsmodi vereinfacht die clientseitigen Integritätsprüfungen.

Die neuesten Versionen unserer AWS SDKs berechnen AWS CLI automatisch eine auf der zyklischen Redundanzprüfung (CRC) basierende Prüfsumme für jeden Upload und senden sie an Amazon S3. Amazon S3 berechnet unabhängig eine Prüfsumme auf der Serverseite und validiert sie anhand des angegebenen Werts, bevor das Objekt und seine Prüfsumme dauerhaft in den Metadaten des Objekts gespeichert werden. Indem die Prüfsumme zusammen mit dem Objekt in den Metadaten gespeichert wird, kann dieselbe Prüfsumme beim Herunterladen des Objekts automatisch zurückgegeben und auch zur Validierung von Downloads verwendet werden. Sie können die in den Metadaten des Objekts gespeicherte Prüfsumme auch jederzeit überprüfen.

Weitere Informationen zu Prüfsummenoperationen, mehrteiligen Uploads oder der Liste der unterstützten Prüfsummenalgorithmen finden Sie unter Überprüfen der Objektintegrität in Amazon S3 im Amazon Simple Storage Service-Benutzerhandbuch.

Mehrteilige Uploads:

Amazon S3 bietet Entwicklern außerdem konsistente vollständige Objektprüfsummen für einteilige und mehrteilige Uploads.

Beim Hochladen von Dateien in mehreren Teilen berechnen die SDKs Prüfsummen für jeden Teil. Amazon S3 verwendet diese Prüfsummen, um die Integrität jedes Teils über die API zu überprüfen. UploadPart Darüber hinaus validiert Amazon S3 die Größe und Prüfsumme der gesamten Datei, wenn Sie die API aufrufen. CompleteMultipartUpload

Wenn Ihr SDK über einen Amazon S3 Transfer Manager verfügt, der Sie bei mehrteiligen Uploads unterstützt, werden die Prüfsummen für die Teile anhand des in der Tabelle SDK-specific angegebenen Standardalgorithmus validiert. Unterstützung von AWS SDKs und Tools Sie können sich für eine vollständige Objektprüfsumme entscheiden, indem Sie die Einstellung auf den CRC64NVME-Algorithmus setzen FULL_OBJECT oder checksum_type sich dafür entscheiden, ihn zu verwenden.

Wenn Sie eine ältere Version des SDK verwenden oder: AWS CLI

Wenn Ihre Anwendung eine Version des SDK oder Tools vor Dezember 2024 verwendet, berechnet Amazon S3 dennoch eine CRC64NVME-Prüfsumme für neue Objekte und speichert sie zur späteren Verwendung in den Objektmetadaten. Sie können den gespeicherten CRC später mit einem von Ihnen berechneten CRC vergleichen und überprüfen, ob die Netzwerkübertragung korrekt war. Sie können den Integritätsschutz auch weiterhin manuell erweitern, indem Sie Ihre eigenen vorberechneten Prüfsummen mit Ihren PutObject UploadPart OR-Anfragen angeben. Dies ist in älteren Versionen die Standardmethode, um dieses Problem zu lösen.

Unterstützung von AWS SDKs und Tools

Die folgenden SDKs unterstützen die in diesem Thema beschriebenen Funktionen und Einstellungen. Alle teilweisen Ausnahmen werden vermerkt. Alle JVM-Systemeigenschaftseinstellungen werden von AWS SDK für Java and the AWS SDK für Kotlin only unterstützt.