回傳一個新的 DataFrame,包含該 DataFrame 中的列,但不包含其他 DataFrame 中的列,同時保留重複的部分。
語法
exceptAll(other: "DataFrame")
參數
| 參數 | 類型 | 說明 |
|---|---|---|
other |
資料框架 | 另一個 DataFrame 可以比較。 |
退貨
DataFrame
Notes
這相當於 EXCEPT ALL SQL 中的做法。 作為 SQL 標準,此函式依位置解析欄位(而非名稱)。
Examples
df1 = spark.createDataFrame(
[("a", 1), ("a", 1), ("a", 1), ("a", 2), ("b", 3), ("c", 4)], ["C1", "C2"])
df2 = spark.createDataFrame([("a", 1), ("b", 3)], ["C1", "C2"])
df1.exceptAll(df2).show()
# +---+---+
# | C1| C2|
# +---+---+
# | a| 1|
# | a| 1|
# | a| 2|
# | c| 4|
# +---+---+