Geben Sie einen Deduplizierungsschlüssel und eine ID in einer Amazon-Nachricht an SNS

Wenn Sie mithilfe einer SNS Amazon-Nachricht ein Datenobjekt an Ihren Streaming-Labeling-Job senden, haben Sie die Möglichkeit, Ihren Deduplizierungsschlüssel und Ihre Deduplizierungs-ID auf eine der folgenden Arten anzugeben. Identifizieren Sie in all diesen Szenarien Ihren Deduplizierungsschlüssel mit dataset-objectid-attribute-name.

Mitbringen eines eigenen Deduplizierungsschlüssels und einer eigenen Deduplizierungs-ID

Erstellen Sie Ihren eigenen Deduplizierungsschlüssel und Ihre Deduplizierungs-ID, indem Sie Ihre SNS Amazon-Nachricht wie folgt konfigurieren. Ersetzen Sie byo-key durch Ihren Schlüssel und UniqueId durch die Deduplizierungs-ID für dieses Datenobjekt.

{
    "source-ref":"s3://bucket/prefix/object1", 
    "dataset-objectid-attribute-name":"byo-key",
    "byo-key":"UniqueId" 
}

Ihr Deduplizierungsschlüssel kann bis zu 140 Zeichen enthalten. Folgende Muster werden unterstützt: "^[$a-zA-Z0-9](-*[a-zA-Z0-9])*".

Ihre Deduplizierungs-ID kann bis zu 1.024 Zeichen enthalten. Folgende Muster werden unterstützt: ^(https|s3)://([^/]+)/?(.*)$.

Verwenden eines vorhandenen Schlüssels als Deduplizierungsschlüssel

Sie können einen vorhandenen Schlüssel in Ihrer Nachricht als Deduplizierungsschlüssel verwenden. In diesem Fall wird der mit diesem Schlüssel verknüpfte Wert für die Deduplizierungs-ID verwendet.

Sie können beispielsweise angeben, den source-ref-Schlüssel als Deduplizierungsschlüssel zu verwenden, indem Sie Ihre Nachricht wie folgt formatieren:

{
    "source-ref":"s3://bucket/prefix/object1",
    "dataset-objectid-attribute-name":"source-ref" 
}

In diesem Beispiel verwendet Ground Truth "s3://bucket/prefix/object1" als Deduplizierungs-ID.