Especificar una clave de deduplicación y un identificador en un mensaje de Amazon SNS

Cuando envías un objeto de datos a tu trabajo de etiquetado de streaming mediante un SNS mensaje de Amazon, tienes la opción de especificar tu clave de deduplicación y tu ID de deduplicación de una de las siguientes maneras. En todos estos escenarios, identifique su clave de deduplicación con dataset-objectid-attribute-name.

Traiga su propia clave e identificador de deduplicación

Cree su propia clave de deduplicación e ID de deduplicación configurando su SNS mensaje de Amazon de la siguiente manera. Sustituya byo-key por su clave y UniqueId por el identificador de deduplicación de ese objeto de datos.

{
    "source-ref":"s3://bucket/prefix/object1", 
    "dataset-objectid-attribute-name":"byo-key",
    "byo-key":"UniqueId" 
}

La clave de deduplicación puede tener hasta 140 caracteres. Los patrones admitidos incluyen: "^[$a-zA-Z0-9](-*[a-zA-Z0-9])*".

Su identificador de deduplicación puede tener una longitud de hasta 1024 caracteres. Los patrones admitidos incluyen: ^(https|s3)://([^/]+)/?(.*)$.

Utilice una clave existente para su clave de deduplicación

Puede usar una clave existente en su mensaje como clave de deduplicación. Al hacerlo, el valor asociado a esa clave se usa para el identificador de deduplicación.

Por ejemplo, puede especificar el uso de la clave source-ref como clave de deduplicación si formatea el mensaje de la siguiente manera:

{
    "source-ref":"s3://bucket/prefix/object1",
    "dataset-objectid-attribute-name":"source-ref" 
}

En este ejemplo, Ground Truth utiliza "s3://bucket/prefix/object1" para el identificador de deduplicación.