HDFSOutputDatasetConfig Classe

Represente como exportar para um caminho HDFS e ser promovido como fileDataset.

Inicialize um HDFSOutputDatasetConfig.

Herança

OutputDatasetConfig

HDFSOutputDatasetConfig

TransformationMixin

HDFSOutputDatasetConfig

Construtor

HDFSOutputDatasetConfig(name=None, destination=None)

Parâmetros

Name	Description
name Necessário	str O nome da saída específica para esta execução. Geralmente, isto é utilizado para fins de linhagem. Se estiver definido como Nenhum, geraremos automaticamente um nome.
destination Necessário	tuple O destino da saída. Se estiver definido como Nenhum, será exportado para o arquivo de dados workspaceblobstore, no caminho /dataset/{run-id}/{output-name}, em que run-id é o ID da Execução e o nome de saída é o nome de saída do parâmetro de nome acima. O destino é uma cadeia de identificação onde o primeiro item é o arquivo de dados e o segundo item é o caminho no arquivo de dados.

Observações

Pode passar o HDFSOutputDatasetConfig como um argumento de uma execução e será traduzido automaticamente para o caminho HDFS.

Métodos

as_input

Especifique como consumir a saída como entrada nos passos subsequentes do pipeline.

as_input

Especifique como consumir a saída como entrada nos passos subsequentes do pipeline.

as_input(name=None)

Parâmetros

Name	Description
name Necessário	str O nome da entrada específica da execução.

Devoluções

Tipo	Description
DatasetConsumptionConfig	Uma DatasetConsumptionConfig instância que descreve como entregar os dados de entrada.