Avro-muoto Data Factoryssa Microsoft Fabricissa
Tässä artikkelissa kerrotaan, miten voit määrittää Avro-muodon Microsoft Fabricin Data Factoryn tietoputkessa.
Avro-muotoa tuetaan seuraavissa toiminnoissa ja liittimillä lähteenä ja kohdesijaintina.
Luokka | Liitin/toiminta |
---|---|
Tuettu liitin | Amazon S3 |
Amazon S3 -yhteensopiva | |
Azure Blob -säilö | |
Azure Data Lake Storage Gen1 | |
Azure Data Lake Storage Gen2 | |
Azure Files | |
Tiedostojärjestelmä | |
FTP | |
Google Cloud Storage | |
HTTP | |
Lakehouse-tiedostot | |
Oracle Cloud Storage | |
SFTP | |
Tuettu toiminta | Aktiviteetin kopioiminen (lähde/kohde) |
Hakutoiminta | |
GetMetadata-toiminta | |
Aktiviteetin poistaminen |
Määritä Avro-muoto valitsemalla yhteytesi tietoputken kopiointitoiminnon lähteessä tai kohdesijainnissa ja valitse sitten Tiedosto-muodon avattavasta luettelosta Avro. Valitse Asetukset , jos haluat muuttaa tämän muodon määritystä.
Kun valitset Tiedostomuoto-osiossa Asetukset, seuraavat ominaisuudet näkyvät Ponnahdusikkunassa Tiedostomuotoasetukset-valintaikkunassa.
Pakkaustyyppi: Valitse avattavasta luettelosta Avro-tiedostojen lukuun käytettävä pakkauspakkauksenhallinta. Voit valita vaihtoehdon Ei mitään tai tyhjentää. Voit myös määrittää tyypin lausekkeen muodostimessa valitsemalla Lisää dynaaminen sisältö .
Pakkaustaso: Määritä pakkaussuhde. Valitse vaihtoehdoista 1 – 7. Voit myös määrittää tason lausekkeen muodostimessa valitsemalla Lisää dynaaminen sisältö .
Kun olet valinnut Asetukset, seuraavat ominaisuudet näkyvät Ponnahdusikkunassa Tiedostomuotoasetukset-valintaikkunassa.
Pakkaustyyppi: Valitse avattavasta luettelosta Avro-tiedostojen kirjoittamiseen käytettävä pakkauspakkauksenhallinta. Voit valita vaihtoehdon Ei mitään tai tyhjentää. Voit myös määrittää tyypin lausekkeen muodostimessa valitsemalla Lisää dynaaminen sisältö .
Pakkaustaso: Määritä pakkaussuhde. Valitse vaihtoehdoista 1 – 7. Voit myös määrittää tason lausekkeen muodostimessa valitsemalla Lisää dynaaminen sisältö .
Kohde-välilehden Lisäasetukset-kohdassa näkyvät seuraavat Avro-muotoiluun liittyvät ominaisuudet.
- Rivien enimmäismäärä tiedostoa kohden: Kun kirjoitat tietoja kansioon, voit kirjoittaa useisiin tiedostoihin ja määrittää tiedostokohtaisen rivien enimmäismäärän.
- Tiedostonimen etuliite: Käytettävissä, kun määritetään rivien enimmäismäärä tiedostoa kohden. Määritä tiedostonimen etuliite, kun kirjoitat tietoja useisiin tiedostoihin. Tuloksena on tämä malli:
<fileNamePrefix>_00000.<fileExtension>
. Jos tätä ei määritetä, tiedostonimen etuliite luodaan automaattisesti. Tämä ominaisuus ei päde, kun lähde on tiedostopohjainen säilö tai osioasetus käytössä oleva tietosäilö.
Seuraavia ominaisuuksia tuetaan Kopioi toiminnon lähde - osassa, kun käytetään Avro-muotoa.
Name | Kuvaus | Arvo | Pakollinen | Avro-komentosarjaominaisuus |
---|---|---|---|---|
Tiedostomuoto | Käytettävä tiedostomuoto. | Avro | Kyllä | tyyppi (alle datasetSettings ):Avro |
Pakkaustyyppi | Avro-tiedostojen lukemiseen käytettävä pakkauspakkauksenhallinta. | Ei ole tyhjentää |
En | avroCompressionCodec: tyhjentää |
Pakkaustaso | Pakkaussuhde. | 1 – 7 | En | avroCompressionLevel: 1–7 |
Seuraavia ominaisuuksia tuetaan Avro-muotoa käytettäessä Kopioi toiminnon kohde -osassa.
Name | Kuvaus | Arvo | Pakollinen | Avro-komentosarjaominaisuus |
---|---|---|---|---|
Tiedostomuoto | Käytettävä tiedostomuoto. | Avro | Kyllä | tyyppi (alle datasetSettings ):Avro |
Pakkaustyyppi | Avro-tiedostojen kirjoittamiseen käytettävä pakkauspakkauksenhallinta. | Ei ole tyhjentää |
En | avroCompressionCodec: tyhjentää |
Pakkaustaso | Pakkaussuhde. | 1 – 7 | En | avroCompressionLevel: 1–7 |
Rivien enimmäismäärä tiedostoa kohden | Kun kirjoitat tietoja kansioon, voit kirjoittaa useisiin tiedostoihin ja määrittää tiedostokohtaisen rivien enimmäismäärän. | < rivien enimmäismäärä tiedostoa kohden > | En | maxRowsPerFile |
Tiedostonimen etuliite | Käytettävissä, kun tiedostoa kohden on määritetty enintään riviä. Määritä tiedostonimen etuliite, kun kirjoitat tietoja useisiin tiedostoihin. Tuloksena on tämä malli: <fileNamePrefix>_00000.<fileExtension> . Jos tätä ei määritetä, tiedostonimen etuliite luodaan automaattisesti. Tämä ominaisuus ei päde, kun lähde on tiedostopohjainen säilö tai osioasetus käytössä oleva tietosäilö. |
< tiedostonimen etuliite > | En | fileNamePrefix |