toLocalIterator

Egy iterátort ad vissza, amely a DataFrame összes sorát tartalmazza. Az iterátor annyi memóriát fog használni, mint a DataFrame legnagyobb partíciója. Az előmegoldással akár a 2 legnagyobb partíció memóriáját is felhasználhatja.

Szemantika

toLocalIterator(prefetchPartitions: bool = False)

Paraméterek

Paraméter Típus Leírás
prefetchPartitions bool, nem kötelező Ha a Sparknak előre le kell kérnie a következő partíciót, mielőtt szükség lenne rá.

Visszatérítések

Iterátor: Sorok iterátora.

Examples

df = spark.createDataFrame(
    [(14, "Tom"), (23, "Alice"), (16, "Bob")], ["age", "name"])
list(df.toLocalIterator())
# [Row(age=14, name='Tom'), Row(age=23, name='Alice'), Row(age=16, name='Bob')]