toArrow

Mengembalikan konten DataFrame ini sebagai PyArrow pyarrow.Table.

Ditambahkan dalam Databricks Runtime 15.3

Sintaksis

toArrow()

Pengembalian Barang

pyarrow.Table

Catatan

Metode ini hanya boleh digunakan jika PyArrow pyarrow.Table yang dihasilkan diharapkan kecil, karena semua data dimuat ke dalam memori driver.

Ini hanya tersedia jika PyArrow diinstal dan tersedia.

API ini adalah API pengembang.

Examples

df = spark.createDataFrame([(2, "Alice"), (5, "Bob")], schema=["age", "name"])
df.coalesce(1).toArrow()
# pyarrow.Table
# age: int64
# name: string
# ----
# age: [[2,5]]
# name: [["Alice","Bob"]]