Bagikan melalui


transform_values

Menerapkan fungsi ke setiap pasangan kunci-nilai dalam peta dan mengembalikan peta dengan hasil aplikasi tersebut sebagai nilai baru untuk pasangan. Mendukung Spark Connect.

Untuk fungsi Databricks SQL yang sesuai, lihat transform_values fungsi.

Syntax

from pyspark.databricks.sql import functions as dbf

dbf.transform_values(col=<col>, f=<f>)

Parameter-parameternya

Pengaturan Tipe Description
col pyspark.sql.Column atau str Nama kolom atau ekspresi.
f function Fungsi biner.

Pengembalian Barang

pyspark.sql.Column: peta entri baru tempat nilai baru dihitung dengan menerapkan fungsi tertentu ke setiap argumen nilai kunci.

Examples

from pyspark.databricks.sql import functions as dbf
df = spark.createDataFrame([(1, {"IT": 10.0, "SALES": 2.0, "OPS": 24.0})], ("id", "data"))
row = df.select(dbf.transform_values(
    "data", lambda k, v: dbf.when(k.isin("IT", "OPS"), v + 10.0).otherwise(v)
).alias("new_data")).head()
sorted(row["new_data"].items())
[('IT', 20.0), ('OPS', 34.0), ('SALES', 2.0)]