指定輸入資料來源格式。
語法
format(source)
參數
| 參數 | 類型 | 說明 |
|---|---|---|
source |
str | 例如 'json' 資料來源名稱,或 'parquet'。 |
退貨
DataStreamReader
Examples
spark.readStream.format("text")
# <...streaming.readwriter.DataStreamReader object ...>
寫入一個文字檔,然後以串流形式讀回:
import tempfile
import time
with tempfile.TemporaryDirectory(prefix="format") as d:
spark.createDataFrame(
[("hello",), ("this",)]).write.mode("overwrite").format("text").save(d)
q = spark.readStream.format("text").load(d).writeStream.format("console").start()
time.sleep(3)
q.stop()