Vollständigkeit - AWS Glue

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Vollständigkeit

Prüft den Prozentsatz vollständiger (nicht null) Werte in einer Spalte anhand eines bestimmten Ausdrucks.

Syntax

Completeness <COL_NAME> <EXPRESSION>

  • COL_ NAME — Der Name der Spalte, anhand derer Sie die Datenqualitätsregel auswerten möchten.

    Unterstützte Spaltentypen: Jeder Spaltentyp

  • EXPRESSION— Ein Ausdruck, der anhand der Regelantwort ausgeführt werden soll, um einen booleschen Wert zu erzeugen. Weitere Informationen finden Sie unter Ausdrücke.

Beispiel: Prozentualer Nullwert

Die folgenden Beispielregeln prüfen, ob mehr als 95 Prozent der Werte in einer Spalte vollständig sind.

Completeness "First_Name" > 0.95
Completeness "First_Name" > 0.95 where "weightinkgs > 10"

Beispiel für dynamische Regeln

  • Completeness "colA" between min(last(5)) - 1 and max(last(5)) + 1

  • Completeness "colA" <= avg(last(10))

Null-Verhalten

Hinweis zu CSV Datenformaten: Leere Zeilen in CSV Spalten können mehrere Verhaltensweisen aufweisen.

  • Wenn es sich bei einer Spalte um einen String Typ handelt, wird die leere Zeile als leere Zeichenfolge erkannt, sodass die Completeness Regel nicht erfüllt wird.

  • Wenn eine Spalte einen anderen Datentyp hat wieInt, wird die leere Zeile als Completeness Regel erkannt NULL und erfüllt sie nicht.