toArrow

Ennek a DataFrame-nek a tartalmát Adja vissza PyArrow-ként pyarrow.Table.

Hozzáadva a Databricks Runtime 15.3-ban

Szemantika

toArrow()

Visszatérítések

pyarrow.Table

Jegyzetek

Ezt a módszert csak akkor szabad használni, ha az eredményül kapott PyArrow pyarrow.Table várhatóan kicsi lesz, mivel az összes adat betöltődik az illesztőprogram memóriájába.

Ez csak akkor érhető el, ha a PyArrow telepítve van és elérhető.

Ez az API egy fejlesztői API.

Examples

df = spark.createDataFrame([(2, "Alice"), (5, "Bob")], schema=["age", "name"])
df.coalesce(1).toArrow()
# pyarrow.Table
# age: int64
# name: string
# ----
# age: [[2,5]]
# name: [["Alice","Bob"]]