Décrire

Calcule les statistiques de base pour les colonnes numériques et de chaînes.

Syntaxe

describe(*cols: Union[str, List[str]])

Paramètres

Paramètre Type Description
cols str, list, facultatif Nom de colonne ou liste des noms de colonnes à décrire par (toutes les colonnes par défaut).

Retours

DataFrame: nouvelle Trame de données qui décrit (fournit des statistiques) en fonction du DataFrame.

Remarques

Cette fonction est destinée à l’analyse exploratoire des données, car nous ne garantissons pas la compatibilité descendante du schéma du DataFrame résultant.

Utilisez le résumé des statistiques développées et contrôlez les statistiques à calculer.

Exemples

df = spark.createDataFrame(
    [("Bob", 13, 40.3, 150.5), ("Alice", 12, 37.8, 142.3), ("Tom", 11, 44.1, 142.2)],
    ["name", "age", "weight", "height"],
)
df.describe(['age']).show()
# +-------+----+
# |summary| age|
# +-------+----+
# |  count|   3|
# |   mean|12.0|
# | stddev| 1.0|
# |    min|  11|
# |    max|  13|
# +-------+----+

df.describe(['age', 'weight', 'height']).show()
# +-------+----+------------------+-----------------+
# |summary| age|            weight|           height|
# +-------+----+------------------+-----------------+
# |  count|   3|                 3|                3|
# |   mean|12.0| 40.73333333333333|            145.0|
# | stddev| 1.0|3.1722757341273704|4.763402145525822|
# |    min|  11|              37.8|            142.2|
# |    max|  13|              44.1|            150.5|
# +-------+----+------------------+-----------------+