options (DataStreamReader)

Dodaje wiele opcji wejściowych dla bazowego źródła danych.

Składnia

options(**options)

Parametry

Parameter Typ Opis
**options słownik Pary klucz-wartość opcji.

Zwroty

DataStreamReader

Examples

spark.readStream.options(x="1", y=2)
# <...streaming.readwriter.DataStreamReader object ...>

Określ opcje jako słownik:

spark.readStream.options(**{"k1": "v1", "k2": "v2"})
# <...streaming.readwriter.DataStreamReader object ...>

Wygeneruj 10 wierszy na sekundę z 10 partycjami przy użyciu źródła Rate:

import time
q = spark.readStream.format("rate").options(
    rowsPerSecond=10, numPartitions=10
).load().writeStream.format("console").start()
time.sleep(3)
q.stop()