Creazione di un set di regole con regole di qualità dei dati

Per creare un set di regole di esempio con regole di qualità dei dati

1. Accedi a Console di gestione AWS e apri la DataBrew console all'indirizzo. https://console.aws.amazon.com/databrew/

2. Scegli DQ RULES dal riquadro di navigazione, quindi scegli Crea set di regole per la qualità dei dati.

3. Inserisci un nome per il tuo set di regole. Facoltativamente, inserisci una descrizione per il tuo set di regole.

4. In Set di dati associato, scegli un set di dati da associare al set di regole.

   Dopo aver selezionato un set di dati, puoi visualizzare il riquadro di anteprima del set di dati a destra.

5. Utilizza l'anteprima nel riquadro di anteprima del set di dati per esplorare i valori e lo schema del set di dati mentre determini le regole di qualità dei dati da creare. L'anteprima può darti informazioni sui potenziali problemi che potresti avere con i dati.

   Alcune fonti di dati, come i database, non supportano l'anteprima dei dati. In tal caso, puoi eseguire un processo di profilazione senza prima convalidare le regole di qualità dei dati. È quindi possibile ottenere informazioni sullo schema dei dati e sulla distribuzione dei valori utilizzando il profilo dati.

6. Controlla la scheda Consigli, che elenca alcuni suggerimenti di regole che puoi utilizzare per creare il tuo set di regole. Puoi selezionare tutti, alcuni o nessuno dei consigli.

   Dopo aver selezionato i consigli pertinenti, scegli Aggiungi al set di regole.

   Questo aggiungerà delle regole al tuo set di regole. Ispeziona e modifica i parametri se necessario. Nota che nelle regole di qualità dei dati possono essere utilizzate solo colonne di tipi semplici come stringhe, numeri e booleani.

7. Scegli Aggiungi un'altra regola per aggiungere una regola non coperta dai consigli. Puoi modificare i nomi delle regole per semplificare l'interpretazione dei risultati di convalida in un secondo momento.

8. Utilizza l'ambito del controllo della qualità dei dati per scegliere se selezionare singole colonne per ogni controllo in questa regola o se devono essere applicate a un gruppo di colonne selezionato. Ad esempio, se il set di dati ha diverse colonne numeriche che devono avere valori compresi tra 0 e 100, puoi definire la regola una volta e selezionare tutte queste colonne da controllare con questa regola.

9. Se la regola prevede più di un controllo, nel menu a discesa Criteri di successo della regola, scegli se tutti i controlli devono essere soddisfatti o quali soddisfano i criteri.

10. Seleziona un controllo che verrà eseguito per verificare questa regola nel menu a discesa Controllo della qualità dei dati. Per ulteriori informazioni sui controlli disponibili, consultaControlli disponibili.

11. Se hai scelto Controllo individuale per ogni colonna nell'ambito del controllo della qualità dei dati, scegli una colonna. Seleziona o digita il nome della colonna per questo controllo.

12. Seleziona i parametri in base al controllo. Alcune condizioni accettano solo i valori personalizzati forniti e altre supportano anche il riferimento a un'altra colonna.

13. Se scegli i controlli per i valori delle colonne come la condizione Contiene la condizione per i valori di stringa, puoi specificare la soglia di «superamento». Ad esempio, se desideri che almeno il 95 percento dei valori soddisfi la condizione, devi scegliere Maggiore di uguale come Condizione della soglia, inserire 95 come Soglia e lasciare «% (percentuale) righe» nel menu a discesa successivo della sezione Soglia. Oppure, se non desideri più di 10 righe in cui manca il valore, la condizione è vera, puoi selezionare Meno di uguale come condizione, inserire 10 per Soglia e scegliere le righe nel menu a discesa successivo. Tieni presente che potresti ottenere risultati diversi se utilizzi campioni di dimensioni diverse durante la convalida.

14. Aggiungi altre regole se necessario.

15. Scegli Crea set di regole.