conf

Interfaz de configuración en tiempo de ejecución para Spark.

Esta es la interfaz a través de la cual el usuario puede obtener y establecer todas las configuraciones de Spark y Hadoop pertinentes para Spark SQL. Al obtener el valor de una configuración, este valor predeterminado es el valor establecido en el subyacente SparkContext, si existe.

Sintaxis

conf

Devoluciones

pyspark.sql.conf.RuntimeConfig

Ejemplos

spark.conf

# Set a runtime configuration for the session.
spark.conf.set("key", "value")
spark.conf.get("key")
# 'value'