Microsoft.Spark 命名空間
重要
部分資訊涉及發行前產品,在發行之前可能會有大幅修改。 Microsoft 對此處提供的資訊,不做任何明確或隱含的瑕疵擔保。
類別
Broadcast<T> |
廣播變數。 廣播變數可讓程式設計人員在每部電腦上保留快取的唯讀變數,而不是傳送含有工作的複本。 例如,您可以使用它們,以有效率的方式為每個節點提供大型輸入資料集的複本。 Spark 也會嘗試使用有效率的廣播演算法來散發廣播變數,以減少通訊成本。 |
DeprecatedAttribute |
自訂屬性,表示 API 已被取代的 Spark 版本。 |
JvmException |
包含從 Microsoft.Spark.Interop.Ipc.JvmBridge 傳回的錯誤訊息。 |
RemovedAttribute |
自訂屬性,表示移除 API 的 Spark 版本。 |
SinceAttribute |
用來表示引進 API 之 Spark 版本的自訂屬性。 |
SparkConf |
Spark 應用程式的組態。 用來將各種 Spark 參數設定為索引鍵/值組。 |
SparkContext |
Spark 功能的主要進入點。 SparkCoNtext 代表 Spark 叢集的連線,可用來在該叢集上建立 RDD、累積器和廣播變數。 每個 JVM 只能有一個 |
SparkFiles |
解析透過 AddFile(String, Boolean) 新增之檔案的路徑。 |
VersionAttribute |
涉及 Spark 版本的自訂屬性基類。 |