Merk
Tilgang til denne siden krever autorisasjon. Du kan prøve å logge på eller endre kataloger.
Tilgang til denne siden krever autorisasjon. Du kan prøve å endre kataloger.
Applies the f function to each partition of this DataFrame.
Syntax
foreachPartition(f: Callable[[Iterator[Row]], None])
Parameters
| Parameter | Type | Description |
|---|---|---|
f |
function | A function that accepts one parameter which will receive each partition to process. |
Examples
df = spark.createDataFrame(
[(14, "Tom"), (23, "Alice"), (16, "Bob")], ["age", "name"])
def func(itr):
for person in itr:
print(person.name)
df.foreachPartition(func)