toLocalIterator

Возвращает итератор, содержащий все строки в этом кадре данных. Итератор будет потреблять столько памяти, сколько самой большой секции в этом кадре данных. При предварительной выборке может потребоваться до памяти 2 крупнейших секций.

Синтаксис

toLocalIterator(prefetchPartitions: bool = False)

Параметры

Параметр	Тип	Описание
prefetchPartitions	bool, необязательный	Если Spark должен предварительно получить следующую секцию перед ее необходимостью.

Возвраты

Итератор: итератор строк.

Примеры

df = spark.createDataFrame(
    [(14, "Tom"), (23, "Alice"), (16, "Bob")], ["age", "name"])
list(df.toLocalIterator())
# [Row(age=14, name='Tom'), Row(age=23, name='Alice'), Row(age=16, name='Bob')]