toLocalIterator

Zwraca iterator zawierający wszystkie wiersze w tej ramce danych. Iterator będzie zużywać tyle pamięci, jak największa partycja w tej ramce danych. W przypadku pobierania wstępnego może zużywać do pamięci 2 największych partycji.

Składnia

toLocalIterator(prefetchPartitions: bool = False)

Parametry

Parameter Typ Opis
prefetchPartitions wartość logiczna, opcjonalnie Jeśli platforma Spark powinna pobrać wstępnie następną partycję przed jej użyciem.

Zwroty

Iterator: iterator wierszy.

Examples

df = spark.createDataFrame(
    [(14, "Tom"), (23, "Alice"), (16, "Bob")], ["age", "name"])
list(df.toLocalIterator())
# [Row(age=14, name='Tom'), Row(age=23, name='Alice'), Row(age=16, name='Bob')]