完整度 - AWS Glue

本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。

完整度

根據指定運算式檢查欄中完整 (非空) 值的百分比。

語法

Completeness <COL_NAME> <EXPRESSION>
  • COL_ NAME — 您要評估資料品質規則的欄名稱。

    支援的欄類型:任何欄類型

  • EXPRESSION— 針對規則類型回應執行以產生布林值的運算式。如需詳細資訊,請參閱表達式

範例:空值百分比

下列範例規則會檢查欄中 95% 以上的值是否已完成。

Completeness "First_Name" > 0.95 Completeness "First_Name" > 0.95 where "weightinkgs > 10"

動態規則範例

  • Completeness "colA" between min(last(5)) - 1 and max(last(5)) + 1

  • Completeness "colA" <= avg(last(10))

空行为

CSV資料格式注意事項:CSV欄上的空白列可以顯示多種行為。

  • 如果資料行屬於類String型,則空白列會被識別為空字串,且不會使Completeness規則失敗。

  • 如果資料行屬於另一種資料類型Int,則空白列會被識別為Completeness規則,NULL且會失敗。