共用方式為

HDFSOutputDatasetConfig 類別

  • 參考

表示如何輸出至 HDFS 路徑，並將其升級為 FileDataset。

初始化 HDFSOutputDatasetConfig。

繼承
OutputDatasetConfig
HDFSOutputDatasetConfig
TransformationMixin
HDFSOutputDatasetConfig

建構函式

HDFSOutputDatasetConfig(name=None, destination=None)

參數

name
str
必要

這個執行專屬的輸出名稱。 這通常用於譜系用途。 如果設定為 [無]，我們會自動產生名稱。

destination
tuple
必要

輸出的目的地。 如果設定為 None，則會輸出至 workspaceblobstore 資料存放區，其路徑 /dataset/{run-id}/{output-name}，其中 run-id 是 Run 的識別碼，而 output-name 是上述 name 參數的輸出名稱。 目的地是 Tuple，其中第一個專案是資料存放區，而第二個專案是資料存放區內的路徑。

備註

您可以將 HDFSOutputDatasetConfig 當做執行的引數傳遞，而且會自動轉譯為 HDFS 路徑。

方法

as_input

指定如何在後續管線步驟中使用輸出作為輸入。

as_input

指定如何在後續管線步驟中使用輸出作為輸入。

as_input(name=None)

參數

name
str
必要

執行特定的輸入名稱。

傳回

DatasetConsumptionConfig實例，描述如何傳遞輸入資料。

傳回類型

DatasetConsumptionConfig