uložit

Uloží obsah DataFrame zdroje dat. Zdroj dat je určen a format sada .options Pokud format není zadaný, použije se výchozí zdroj dat nakonfigurovaný spark.sql.sources.default pomocí.

Syntaxe

save(path=None, format=None, mode=None, partitionBy=None, **options)

Parametry

Parameter Typ Description
path str, volitelné Cesta v systému souborů podporovaných systémem Hadoop.
format str, volitelné Formát použitý k uložení.
mode str, volitelné Chování, pokud již data existují. Přijaté hodnoty jsou 'append', , 'overwrite''ignore'a nebo 'error''errorifexists' (výchozí).
partitionBy list, volitelné Názvy sloupců dělení
**options slovník Další možnosti řetězce

Návraty

None

Příklady

Zapište datový rámec do souboru JSON a přečtěte si ho zpátky.

import tempfile
with tempfile.TemporaryDirectory(prefix="save") as d:
    spark.createDataFrame(
        [{"age": 100, "name": "Alice"}]
    ).write.mode("overwrite").format("json").save(d)

    spark.read.format('json').load(d).show()
    # +---+------------+
    # |age|        name|
    # +---+------------+
    # |100|Alice|
    # +---+------------+