HDFSOutputDatasetConfig Klass
Representerar hur du matar ut till en HDFS-sökväg och befordras som en FileDataset.
Initiera en HDFSOutputDatasetConfig.
- Arv
-
HDFSOutputDatasetConfigHDFSOutputDatasetConfig
Konstruktor
HDFSOutputDatasetConfig(name=None, destination=None)Parametrar
| Name | Description |
|---|---|
|
name
Obligatorisk
|
Namnet på utdata som är specifika för den här körningen. Detta används vanligtvis för ursprung. Om värdet är Ingen genererar vi automatiskt ett namn. |
|
destination
Obligatorisk
|
Målet för utdata. Om värdet är Ingen matas det ut till arbetsytansbloblagerdatalager, under sökvägen /dataset/{run-id}/{output-name}, där run-id är Körningens ID och utdatanamnet är utdatanamnet från namnparametern ovan. Målet är en tuppeln där det första objektet är datalagringen och det andra objektet är sökvägen i dataarkivet. |
Kommentarer
Du kan skicka HDFSOutputDatasetConfig som argument för en körning och den översätts automatiskt till HDFS-sökvägen.
Metoder
| as_input |
Ange hur utdata ska användas som indata i efterföljande pipelinesteg. |
as_input
Ange hur utdata ska användas som indata i efterföljande pipelinesteg.
as_input(name=None)Parametrar
| Name | Description |
|---|---|
|
name
Obligatorisk
|
Namnet på de indata som är specifika för körningen. |
Returer
| Typ | Description |
|---|---|
|
En DatasetConsumptionConfig instans som beskriver hur du levererar indata. |