toPandas

Retourneert de inhoud van dit DataFrame als Pandas pandas.DataFrame.

Syntaxis

toPandas()

Retouren

pandas.DataFrame

Aantekeningen

Deze methode moet alleen worden gebruikt als de resulterende Pandas pandas.DataFrame naar verwachting klein is, omdat alle gegevens in het geheugen van het stuurprogramma worden geladen.

Gebruik met spark.sql.execution.arrow.pyspark.enabled=True is experimenteel.

Dit is alleen beschikbaar als Pandas is geïnstalleerd en beschikbaar is.

Examples

df = spark.createDataFrame([(2, "Alice"), (5, "Bob")], schema=["age", "name"])
df.toPandas()
#    age   name
# 0    2  Alice
# 1    5    Bob