Formát Avro ve službě Data Factory v Microsoft Fabric

Tento článek popisuje, jak nakonfigurovat formát Avro v datovém kanálu služby Data Factory v Microsoft Fabric.

Podporované funkce

Formát Avro je podporovaný pro následující aktivity a konektory jako zdroj a cíl.

Kategorie Připojení or/aktivita
Podporovaný konektor Amazon S3
Azure Blob Storage
Azure Data Lake Storage Gen1
Azure Data Lake Storage Gen2
FTP
Cloudové úložiště Googlu
HTTP
SFTP
Podporovaná aktivita aktivita Copy
Aktivita Lookup
Aktivita GetMetadata
Aktivita odstranění

Formát Avro v aktivitě kopírování

Pokud chcete nakonfigurovat formát Avro, zvolte připojení ve zdroji nebo cíli aktivity kopírování datového kanálu a pak v rozevíracím seznamu formát souboru vyberte Avro. Vyberte Nastavení pro další konfiguraci tohoto formátu.

Screenshot showing file format settings.

Formát Avro jako zdroj

Po výběru Nastavení v části Formát souboru se v dialogovém okně Nastavení formátu souboru zobrazí následující vlastnosti.

Screenshot showing Avro file format source.

  • Typ komprese: Zvolte kodek komprese použitý ke čtení souborů Avro v rozevíracím seznamu. Můžete si vybrat možnost None (Žádné) nebo deflate (Deflate). Můžete také zvolit Přidat dynamický obsah a určit typ v tvůrci výrazů.

  • Úroveň komprese: Zadejte poměr komprese. Vyberte z 1 do 7. Můžete také zvolit Přidat dynamický obsah a určit úroveň v tvůrci výrazů.

Formát Avro jako cíl

Po výběru Nastavení se v dialogovém okně Nastavení formátu souboru zobrazí následující vlastnosti.

Screenshot showing Avro file format destination.

  • Typ komprese: Zvolte kodek komprese použitý k zápisu souborů Avro v rozevíracím seznamu. Můžete si vybrat možnost None (Žádné) nebo deflate (Deflate). Můžete také zvolit Přidat dynamický obsah a určit typ v tvůrci výrazů.

  • Úroveň komprese: Zadejte poměr komprese. Vyberte z 1 do 7. Můžete také zvolit Přidat dynamický obsah a určit úroveň v tvůrci výrazů.

V části Upřesnit nastavení na kartě Cíl se zobrazí následující vlastnosti související s formátem Avro.

  • Maximální počet řádků na soubor: Při zápisu dat do složky se můžete rozhodnout zapisovat do více souborů a zadat maximální počet řádků na soubor.
  • Předpona názvu souboru: Platí při konfiguraci maximálního počtu řádků na soubor . Při zápisu dat do více souborů zadejte předponu názvu souboru, výsledkem je tento vzor: <fileNamePrefix>_00000.<fileExtension>. Pokud není zadána, automaticky se vygeneruje předpona názvu souboru. Tato vlastnost se nevztahuje, pokud zdrojem je úložiště založené na souborech nebo možnost oddílu s povoleným úložištěm dat.

Souhrn tabulky

Avro jako zdroj

Následující vlastnosti jsou podporovány v části Zdroj aktivity kopírování při použití formátu Avro.

Název Popis Hodnota Požaduje se Avro script – vlastnost
Formát souboru Formát souboru, který chcete použít. Avro Ano typ (v části datasetSettings):
Avro
Typ komprese Komprimační kodek používaný ke čtení souborů Avro. Nic
Deflaci
No avroCompressionCodec:

Deflaci
Úroveň komprese Poměr komprese. 17 No avroCompressionLevel:
1 až 7

Avro jako cíl

Následující vlastnosti jsou podporovány v části Cíl aktivity kopírování při použití formátu Avro.

Název Popis Hodnota Požaduje se Avro script – vlastnost
Formát souboru Formát souboru, který chcete použít. Avro Ano typ (v části datasetSettings):
Avro
Typ komprese Kodek komprese používaný k zápisu souborů Avro. Nic
Deflaci
No avroCompressionCodec:

Deflaci
Úroveň komprese Poměr komprese. 17 No avroCompressionLevel:
1 až 7
Maximální počet řádků na soubor Při zápisu dat do složky se můžete rozhodnout zapisovat do více souborů a zadat maximální počet řádků na soubor. < maximální počet řádků na soubor > No maxRowsPerFile
Předpona názvu souboru Platí pro konfiguraci maximálního počtu řádků na soubor . Při zápisu dat do více souborů zadejte předponu názvu souboru, výsledkem je tento vzor: <fileNamePrefix>_00000.<fileExtension>. Pokud není zadána, automaticky se vygeneruje předpona názvu souboru. Tato vlastnost se nevztahuje, pokud zdrojem je úložiště založené na souborech nebo možnost oddílu s povoleným úložištěm dat. < předpona názvu souboru > No fileNamePrefix