cardinalidade

Função de recolha: Devolve o comprimento do array ou mapa armazenado na coluna.

Para a função SQL do Databricks correspondente, veja cardinality função.

Sintaxe

from pyspark.databricks.sql import functions as dbf

dbf.cardinality(col=<col>)

Parâmetros

Devoluções

pyspark.sql.Column: comprimento do array/mapa.

Examples

from pyspark.databricks.sql import functions as dbf
df = spark.createDataFrame([([1, 2, 3],),([1],),([],)], ['data'])
df.select(dbf.cardinality("data")).show()

+-----------------+
|cardinality(data)|
+-----------------+
|                3|
|                1|
|                0|
+-----------------+