за исключениемAll

Возвращает новый кадр данных, содержащий строки в этом кадре данных, но не в другом кадре данных при сохранении дубликатов.

Синтаксис

exceptAll(other: "DataFrame")

Параметры

Параметр Тип Описание
other DataFrame Другой кадр данных для сравнения.

Возвраты

DataFrame

Примечания

Это эквивалентно EXCEPT ALL SQL. Как правило, в SQL эта функция разрешает столбцы по позиции (а не по имени).

Примеры

df1 = spark.createDataFrame(
        [("a", 1), ("a", 1), ("a", 1), ("a", 2), ("b",  3), ("c", 4)], ["C1", "C2"])
df2 = spark.createDataFrame([("a", 1), ("b", 3)], ["C1", "C2"])
df1.exceptAll(df2).show()
# +---+---+
# | C1| C2|
# +---+---+
# |  a|  1|
# |  a|  1|
# |  a|  2|
# |  c|  4|
# +---+---+