options (DataStreamWriter)

Ajoute plusieurs options de sortie pour la source de données sous-jacente.

Syntaxe

options(**options)

Paramètres

Paramètre Type Description
**options dictionnaire Paires clé-valeur d’options.

Retours

DataStreamWriter

Exemples

df = spark.readStream.format("rate").load()
df.writeStream.options(**{"k1": "v1", "k2": "v2"})
# <...streaming.readwriter.DataStreamWriter object ...>

Imprimez 3 lignes par lot sans troncation :

import time
q = spark.readStream.format(
    "rate").option("rowsPerSecond", 10).load().writeStream.format(
        "console").options(numRows=3, truncate=False).start()
time.sleep(3)
q.stop()