options (DataStreamWriter)

Добавляет несколько вариантов вывода для базового источника данных.

Доступные параметры см. в разделе "Параметры DataStreamWriter".

Синтаксис

options(**options)

Параметры

Параметр	Тип	Описание
**options	Дикт	Пары "ключ-значение" параметров.

Возвраты

DataStreamWriter

Примеры

df = spark.readStream.format("rate").load()
df.writeStream.options(**{"k1": "v1", "k2": "v2"})
# <...streaming.readwriter.DataStreamWriter object ...>

Печать 3 строк на пакет без усечения:

import time
q = spark.readStream.format(
    "rate").option("rowsPerSecond", 10).load().writeStream.format(
        "console").options(numRows=3, truncate=False).start()
time.sleep(3)
q.stop()