descrição geral do Azure Data Factory
O Azure Data Factory é um serviço de integração de dados baseado na cloud que orquestra e automatiza o movimento e a transformação dos dados. Pode criar soluções de integração de dados com o serviço Data Factory, que pode ingerir dados de vários arquivos de dados, transformá-los/processá-los e publicar os dados resultantes nos arquivos de dados.
Atualmente, existem duas versões do serviço: a versão 1 (V1) e a versão 2 (V2).
Versão 1
O serviço Data Factory versão 1 (V1) permite-lhe criar pipelines de dados que movem e transformam dados e, em seguida, executam os pipelines com base numa agenda especificada (hora a hora, diariamente, semanalmente, etc.). Também proporciona visualizações ricas para apresentar a linhagem e as dependências entre os pipelines de dados e monitorizá-los a partir de uma vista unificada única, para identificar facilmente problemas e configurar alertas de monitorização.
Veja Referência da API REST V1 para obter uma lista de operações suportadas pelo Data Factory V1. Para saber mais sobre o serviço, veja Introdução ao Data Factory V1.
Versão 2
A versão 2 (V2) do Data Factory baseia-se no Data Factory V1 e suporta um conjunto mais amplo de cenários de integração de dados na cloud. As capacidades adicionais do Data Factory incluem:
- Fluxo de controlo: ramificação, ciclo e processamento condicional
- Implemente e execute pacotes do SQL Server Integration Services (SSIS) no Azure.
- Suporte para ambientes de rede virtual (VNET).
- Aumente horizontalmente com o poder de processamento a pedido.
- Suporte para o cluster do Spark a pedido.
- Agendamento flexível para suportar carregamentos de dados incrementais.
- Acionadores para executar pipelines de dados.
Veja Referência da API REST V2 para obter uma lista de operações suportadas pelo Data Factory V2. Para saber mais sobre o serviço, veja Introdução ao Data Factory V2.