Ler em inglês

Compartilhar via


Formato Avro no Data Factory no Microsoft Fabric

Este artigo descreve como configurar o formato Avro no pipeline de dados do Data Factory no Microsoft Fabric.

Funcionalidades com suporte

O formato Avro tem suporte para as seguintes atividades e conectores como origem e destino.

Formato Avro na atividade de cópia

Para configurar o formato Avro, escolha sua conexão na origem ou no destino da atividade de cópia do pipeline de dados e, em seguida, selecioneAvro na lista suspensa de Formato de arquivo. Selecione Configurações para configuração adicional desse formato.

Captura de tela mostrando as configurações de formato de arquivo.

Formato Avro como origem

Depois de selecionar Configurações na seção Formato de arquivo, as seguintes propriedades são mostradas na caixa de diálogo pop-up Configurações de formato de arquivo.

Captura de tela mostrando a origem do formato de arquivo Avro.

  • Tipo de compactação: escolha o codec de compactação usado para ler arquivos Avro na lista suspensa. Você pode escolher entre Nenhum ou compactar. Você também pode escolher Adicionar conteúdo dinâmico para especificar o tipo no construtor de expressões.

  • Nível de compactação: especifique a taxa de compactação. Escolha de 1 a 7. Você também pode escolher Adicionar conteúdo dinâmico para especificar o nível no construtor de expressões.

Formato Avro como destino

Depois de selecionar Configurações, as seguintes propriedades são mostradas na caixa de diálogo pop-up Configurações de formato de arquivo.

Captura de tela mostrando o destino do formato de arquivo Avro.

  • Tipo de compactação: escolha o codec de compactação usado para ler arquivos Avro na lista suspensa. Você pode escolher entre Nenhum ou compactar. Você também pode escolher Adicionar conteúdo dinâmico para especificar o tipo no construtor de expressões.

  • Nível de compactação: especifique a taxa de compactação. Escolha de 1 a 7. Você também pode escolher Adicionar conteúdo dinâmico para especificar o nível no construtor de expressões.

Nas configurações Avançadas na guia Destino, as seguintes propriedades relacionadas ao formato Avro são exibidas.

  • Máximo de linhas por arquivo: ao gravar dados em uma pasta, você pode optar por gravar em vários arquivos e especificar o máximo de linhas por arquivo.
  • Prefixo de nome de arquivo: aplicável quando o máximo de linhas por arquivo é configurado. Especifique o prefixo do nome do arquivo ao gravar dados em vários arquivos, resultando neste padrão: <fileNamePrefix>_00000.<fileExtension>. Se não for especificado, o prefixo de nome de arquivo será gerado automaticamente. Essa propriedade não se aplica quando a origem é um repositório baseado em arquivo ou um armazenamento de dados habilitado para uma opção de partição.

Resumo da tabela

Avro como fonte

As propriedades a seguir têm suporte na seção Origem da atividade de cópia ao usar o formato Avro.

Nome Descrição Valor Obrigatório Propriedade de script Avro
Formato de arquivo O formato de arquivo que você deseja usar. Avro Sim tipo (em datasetSettings):
Avro
Tipo de compactação O codec de compactação usado para ler arquivos Avro. Nenhuma
deflate
Não avroCompressionCodec:

deflate
Nível de compactação A taxa de compactação. 1 a 7 Não avroCompressionLevel:
1 a 7

Avro como destino

As propriedades a seguir têm suporte na seção Destino da atividade de cópia ao usar o formato Avro.

Nome Descrição Valor Obrigatório Propriedade de script Avro
Formato de arquivo O formato de arquivo que você deseja usar. Avro Sim tipo (em datasetSettings):
Avro
Tipo de compactação O codec de compactação usado para gravar arquivos Avro. Nenhuma
deflate
Não avroCompressionCodec:

deflate
Nível de compactação A taxa de compactação. 1 a 7 Não avroCompressionLevel:
1 a 7
Máximo de linhas por arquivo Ao gravar dados em uma pasta, você pode optar por gravar em vários arquivos e especificar o máximo de linhas por arquivo. < suas linhas máximas por arquivo > Não maxRowsPerFile
Prefixo de nome de arquivo Aplicável quando o Máximo de linhas por arquivo é configurado. Especifique o prefixo do nome do arquivo ao gravar dados em vários arquivos, resultando neste padrão: <fileNamePrefix>_00000.<fileExtension>. Se não for especificado, o prefixo de nome de arquivo será gerado automaticamente. Essa propriedade não se aplica quando a origem é um repositório baseado em arquivo ou um armazenamento de dados habilitado para uma opção de partição. < seu prefixo de nome de arquivo > Não fileNamePrefix