Catatan
Akses ke halaman ini memerlukan otorisasi. Anda dapat mencoba masuk atau mengubah direktori.
Akses ke halaman ini memerlukan otorisasi. Anda dapat mencoba mengubah direktori.
Menentukan sumber data output yang mendasar.
Sintaksis
format(source)
Parameter-parameternya
| Parameter | Tipe | Deskripsi |
|---|---|---|
source |
str | Nama sumber data, misalnya 'parquet' atau 'console'. |
Pengembalian Barang
DataStreamWriter
Examples
df = spark.readStream.format("rate").load()
df.writeStream.format("text")
# <...streaming.readwriter.DataStreamWriter object ...>
Tulis aliran sumber Laju ke CSV:
import tempfile
import time
with tempfile.TemporaryDirectory(prefix="format1") as d:
with tempfile.TemporaryDirectory(prefix="format2") as cp:
df = spark.readStream.format("rate").load()
q = df.writeStream.format("csv").option("checkpointLocation", cp).start(d)
time.sleep(5)
q.stop()
spark.read.schema("timestamp TIMESTAMP, value STRING").csv(d).show()