toLocalIterator

Mengembalikan iterator yang berisi semua baris dalam DataFrame ini. Iterator akan mengonsumsi memori sebanyak partisi terbesar dalam DataFrame ini. Dengan prefetch, dapat mengonsumsi hingga memori 2 partisi terbesar.

Sintaksis

toLocalIterator(prefetchPartitions: bool = False)

Parameter-parameternya

Parameter Tipe Deskripsi
prefetchPartitions bool, opsional Jika Spark harus mengambil partisi berikutnya terlebih dahulu sebelum diperlukan.

Pengembalian Barang

Iterator: Iterator baris.

Examples

df = spark.createDataFrame(
    [(14, "Tom"), (23, "Alice"), (16, "Bob")], ["age", "name"])
list(df.toLocalIterator())
# [Row(age=14, name='Tom'), Row(age=23, name='Alice'), Row(age=16, name='Bob')]