Поделиться через


min

Возвращает минимальное значение выражения в группе.

Синтаксис

from pyspark.sql import functions as sf

sf.min(col)

Параметры

Параметр Тип Description
col pyspark.sql.Column или имя столбца Целевой столбец, на котором вычисляется минимальное значение.

Возвраты

pyspark.sql.Column: столбец, содержащий минимальное значение, вычисленное.

Примеры

Пример 1. Вычисление минимального значения числового столбца

import pyspark.sql.functions as sf
df = spark.range(10)
df.select(sf.min(df.id)).show()
+-------+
|min(id)|
+-------+
|      0|
+-------+

Пример 2. Вычисление минимального значения строкового столбца

import pyspark.sql.functions as sf
df = spark.createDataFrame([("Alice",), ("Bob",), ("Charlie",)], ["name"])
df.select(sf.min("name")).show()
+---------+
|min(name)|
+---------+
|    Alice|
+---------+

Пример 3. Вычисление минимального значения столбца со значениями NULL

import pyspark.sql.functions as sf
df = spark.createDataFrame([(1,), (None,), (3,)], ["value"])
df.select(sf.min("value")).show()
+----------+
|min(value)|
+----------+
|         1|
+----------+

Пример 4. Вычисление минимального значения столбца в сгруппированных кадрах данных

import pyspark.sql.functions as sf
df = spark.createDataFrame([("Alice", 1), ("Alice", 2), ("Bob", 3)], ["name", "value"])
df.groupBy("name").agg(sf.min("value")).show()
+-----+----------+
| name|min(value)|
+-----+----------+
|Alice|         1|
|  Bob|         3|
+-----+----------+

Пример 5. Вычисление минимального значения столбца в кадре данных с несколькими столбцами

import pyspark.sql.functions as sf
df = spark.createDataFrame(
    [("Alice", 1, 100), ("Bob", 2, 200), ("Charlie", 3, 300)],
    ["name", "value1", "value2"])
df.select(sf.min("value1"), sf.min("value2")).show()
+-----------+-----------+
|min(value1)|min(value2)|
+-----------+-----------+
|          1|        100|
+-----------+-----------+