Sum - AWS Glue

Sum

Verifica a soma de todos os valores em uma coluna em relação a uma determinada expressão.

Sintaxe

Sum <COL_NAME> <EXPRESSION>

  • COL_NAME: o nome da coluna em relação à qual você deseja avaliar a regra de qualidade de dados.

    Tipos de coluna compatíveis: byte, decimal, duplo, flutuante, inteiro, longo, curto

  • EXPRESSION: uma expressão a ser executada na resposta do tipo de regra para produzir um valor booliano. Para ter mais informações, consulte Expressões.

Exemplo: soma

O exemplo de regra a seguir verifica se a soma de todos os valores em uma coluna excede um limite.

Sum "transaction_total" > 500000
Sum "Salary" < 55600 where "Customer_ID < 10"

Exemplos de regras dinâmicas

  • Sum "ColA" > avg(last(10))

  • Sum "colA" between min(last(10)) - 1 and max(last(10)) + 1

Comportamento nulo

A regra Sum ignorará linhas com valores NULL no cálculo da soma. Por exemplo: 

+---+-----------+
|id |units      |
+---+-----------+
|100|0          |
|101|null       |
|102|20         |
|103|null       |
|104|40         |
+---+-----------+

A soma da coluna units não considerará as linhas 101 e 103 e resultará em (0 + 20 + 40) = 60.