json (DataStreamReader)

Načte datový proud souboru JSON a vrátí výsledky jako datový rámec. Řádky JSON (JSON s oddělovači nového řádku) se ve výchozím nastavení podporují. Pro JSON s jedním záznamem multiLine na soubor nastavte možnost na true. Pokud schema není zadáno, vstupní schéma je odvozeno z dat.

Syntaxe

json(path, schema=None, **options)

Parametry

Parameter	Typ	Description
path	str	Cesta k datové sadě JSON
schema	StructType nebo str, volitelné	Schéma jako řetězec ve formátu StructType nebo DDL (například col0 INT, col1 DOUBLE).

Návraty

DataFrame

Příklady

Načtení datového proudu z dočasného souboru JSON:

import tempfile
import time
with tempfile.TemporaryDirectory(prefix="json") as d:
    spark.createDataFrame(
        [(100, "Hyukjin Kwon"),], ["age", "name"]
    ).write.mode("overwrite").format("json").save(d)
    q = spark.readStream.schema(
        "age INT, name STRING"
    ).json(d).writeStream.format("console").start()
    time.sleep(3)
    q.stop()