Anmerkung
Der Zugriff auf diese Seite erfordert eine Genehmigung. Du kannst versuchen, dich anzumelden oder die Verzeichnisse zu wechseln.
Der Zugriff auf diese Seite erfordert eine Genehmigung. Du kannst versuchen , die Verzeichnisse zu wechseln.
Gibt den Satzunterschied von zwei binären Darstellungen von Datasketches ThetaSketch -Objekten (Elemente in der ersten Skizze, aber nicht in Sekunde) mithilfe eines Datasketches ANotB -Objekts zurück.
Syntax
from pyspark.sql import functions as sf
sf.theta_difference(col1, col2)
Die Parameter
| Parameter | Typ | Description |
|---|---|---|
col1 |
pyspark.sql.Column oder str |
Die erste Theta-Skizze. |
col2 |
pyspark.sql.Column oder str |
Die zweite Theta-Skizze. |
Rückkehr
pyspark.sql.Column: Die binäre Darstellung des Unterschieds ThetaSketch.
Examples
Beispiel 1: Abrufen der Differenz von zwei Theta-Skizzen
from pyspark.sql import functions as sf
df = spark.createDataFrame([(1,4),(2,4),(3,5),(4,5)], "struct<v1:int,v2:int>")
df = df.agg(
sf.theta_sketch_agg("v1").alias("sketch1"),
sf.theta_sketch_agg("v2").alias("sketch2")
)
df.select(sf.theta_sketch_estimate(sf.theta_difference(df.sketch1, "sketch2"))).show()
+---------------------------------------------------------+
|theta_sketch_estimate(theta_difference(sketch1, sketch2))|
+---------------------------------------------------------+
| 3|
+---------------------------------------------------------+