datediff

Возвращает число дней с start до end.

Для соответствующей функции Databricks SQL смотрите функцию datediff.

Синтаксис

from pyspark.databricks.sql import functions as dbf

dbf.datediff(end=<end>, start=<start>)

Параметры

Параметр	Тип	Description
end	pyspark.sql.Column или str	до даты столбца для работы.
start	pyspark.sql.Column или str	столбец даты для работы.

Возвраты

pyspark.sql.Column: разница в днях между двумя датами.

Примеры

from pyspark.databricks.sql import functions as dbf
df = spark.createDataFrame([('2015-04-08','2015-05-10')], ['d1', 'd2'])
df.select('*', dbf.datediff('d1', 'd2')).show()
df.select('*', dbf.datediff(df.d2, df.d1)).show()