SparkContext.AddFile(String, Boolean) 方法
定義
重要
部分資訊涉及發行前產品,在發行之前可能會有大幅修改。 Microsoft 對此處提供的資訊,不做任何明確或隱含的瑕疵擔保。
在每個節點上新增要使用此 Spark 作業下載的檔案。
public void AddFile (string path, bool recursive = false);
member this.AddFile : string * bool -> unit
Public Sub AddFile (path As String, Optional recursive As Boolean = false)
參數
- path
- String
檔案路徑可以是本機檔案、HDFS 中的檔案 (或其他 Hadoop 支援的檔案系統,) 或 HTTP、HTTPS 或 FTP URI。
- recursive
- Boolean
如果為 true,則可以在 中 path
提供目錄。 目前只有 Hadoop 支援的檔案系統才支援目錄。
備註
如果在執行期間新增檔案,則在下一個 TaskSet 啟動時將無法使用。