Passando da Geração 1 do Fluxo de Dados para a Geração 2 do Fluxo de Dados

Dataflow Gen2 é a nova geração de fluxos de dados. A nova geração de fluxos de dados reside ao lado do Power BI Dataflow (Gen1) e traz novos recursos e experiências aprimoradas. A seção a seguir fornece uma comparação entre Dataflow Gen1 e Dataflow Gen2.

Descrição geral das funcionalidades

Caraterística Fluxo de dados Gen2 Fluxo de dados Gen1
Criar fluxos de dados com o Power Query
Fluxo de criação mais curto
Gravação automática e publicação em segundo plano
Destinos dos dados
Monitoramento aprimorado e histórico de atualizações
Integração com pipelines de dados
Computação em alta escala
Obter dados através do conector Dataflows
Direct Query via conector Dataflows
Atualização incremental
Suporte do AI Insights

Experiência de criação mais curta

Trabalhar com o Dataflow Gen2 é como voltar para casa. Mantivemos a experiência completa do Power Query a que está habituado nos fluxos de dados do Power BI. Ao inserir a experiência, você é guiado passo a passo para inserir os dados em seu fluxo de dados. Também encurtamos a experiência de criação para reduzir o número de etapas necessárias para criar fluxos de dados e adicionamos alguns novos recursos para tornar sua experiência ainda melhor.

Screenshot of the overall authoring experience in dataflows.

Nova experiência de salvamento de fluxo de dados

Com o Dataflow Gen2, mudamos a forma como o salvamento de um fluxo de dados funciona. Todas as alterações feitas em um fluxo de dados são salvas automaticamente na nuvem. Assim, você pode sair da experiência de criação a qualquer momento e continuar de onde parou em um momento posterior. Depois de concluir a criação do fluxo de dados, você publica as alterações e essas alterações são usadas quando o fluxo de dados é atualizado. Além disso, a publicação do fluxo de dados salva as alterações e executa validações que devem ser executadas em segundo plano. Esse recurso permite que você salve seu fluxo de dados sem ter que esperar a validação terminar.

Para saber mais sobre a nova experiência de gravação, vá para Salvar um rascunho do seu fluxo de dados.

Destinos dos dados

Semelhante ao Dataflow Gen1, o Dataflow Gen2 permite que você transforme seus dados no armazenamento interno/de preparo do fluxo de dados, onde podem ser acessados usando o conector Dataflow. O Dataflow Gen2 também permite que você especifique um destino de dados para seus dados. Usando esse recurso, agora você pode separar sua lógica ETL e o armazenamento de destino. Este recurso beneficia você de muitas maneiras. Por exemplo, agora você pode usar um fluxo de dados para carregar dados em uma casa de lago e, em seguida, usar um bloco de anotações para analisar os dados. Ou você pode usar um fluxo de dados para carregar dados em um banco de dados SQL do Azure e, em seguida, usar um pipeline de dados para carregar os dados em um data warehouse.

No Dataflow Gen2, adicionamos suporte para os seguintes destinos e muitos mais estão chegando em breve:

  • Tecido Lakehouse
  • Azure Data Explorer (Kusto)
  • Azure Synapse Analytics (SQL DW)
  • Base de Dados SQL do Azure

Nota

Para carregar seus dados no Fabric Warehouse, você pode usar o conector do Azure Synapse Analytics (SQL DW) recuperando a cadeia de conexão SQL. Para obter mais informações: Conectividade com data warehousing no Microsoft Fabric

Screenshot with the supported data destinations displayed.

Novo histórico de atualizações e monitoramento

Com o Dataflow Gen2, apresentamos uma nova maneira de monitorar suas atualizações de fluxo de dados. Integramos o suporte para o Monitoring Hub e damos à nossa experiência de Histórico de Atualização uma grande atualização.

Screenshot showing the details of a refresh status.

Integração com pipelines de dados

Os pipelines de dados permitem agrupar atividades que, juntas, executam uma tarefa. Uma atividade é uma unidade de trabalho que pode ser executada. Por exemplo, uma atividade pode copiar dados de um local para outro, executar uma consulta SQL, executar um procedimento armazenado ou executar um bloco de anotações Python.

Um pipeline pode conter uma ou mais atividades conectadas por dependências. Por exemplo, você pode usar um pipeline para ingerir e limpar dados de um blob do Azure e, em seguida, iniciar um Dataflow Gen2 para analisar os dados de log. Você também pode usar um pipeline para copiar dados de um blob do Azure para um banco de dados SQL do Azure e, em seguida, executar um procedimento armazenado no banco de dados.

Screenshot showing the integration with data pipelines.

Guardar como rascunho

Com o Dataflow Gen2, introduzimos uma experiência sem preocupações, eliminando a necessidade de publicação para salvar suas alterações. Com a funcionalidade salvar como rascunho, armazenamos uma versão de rascunho do seu fluxo de dados sempre que você faz uma alteração. Perdeu a ligação à Internet? Fechou acidentalmente o navegador? Não te preocupes; nós temos as suas costas. Depois de retornar ao seu fluxo de dados, suas alterações recentes ainda estarão lá e você poderá continuar de onde parou. Esta é uma experiência perfeita e não requer nenhuma contribuição sua. Isso permite que você trabalhe em seu fluxo de dados sem ter que se preocupar em perder suas alterações ou ter que corrigir todos os erros de consulta antes de poder salvar suas alterações. Para saber mais sobre esse recurso, vá para Salvar um rascunho do seu fluxo de dados.

Computação em alta escala

Semelhante ao Dataflow Gen1, o Dataflow Gen2 também apresenta um mecanismo de computação aprimorado para melhorar o desempenho de ambas as transformações de consultas referenciadas e obter cenários de dados. Para conseguir isso, o Dataflow Gen2 cria itens Lakehouse e Warehouse em seu espaço de trabalho e os usa para armazenar e acessar dados para melhorar o desempenho de todos os seus fluxos de dados.

Licenciamento Dataflow Gen1 vs Gen2

O Dataflow Gen2 é a nova geração de fluxos de dados que reside ao lado do fluxo de dados do Power BI (Gen1) e traz novos recursos e experiências aprimoradas. Requer uma capacidade de malha ou uma capacidade de avaliação de malha. Para entender melhor como o licenciamento funciona para fluxos de dados, leia o seguinte artigo: Conceitos e licenças do Microsoft Fabric

Experimente o Dataflow Gen2 reutilizando suas consultas do Dataflow Gen1

Você provavelmente tem muitas consultas Dataflow Gen1 e está se perguntando como pode experimentá-las no Dataflow Gen2. Temos algumas opções para você recriar seus fluxos de dados Gen1 como Dataflow Gen2.

  • Exporte suas consultas Dataflow Gen1 e importe-as para o Dataflow Gen2

    Agora você pode exportar consultas nas experiências de criação Dataflow Gen1 e Gen2 e salvá-las em um arquivo PQT que você pode importar para o Dataflow Gen2. Para obter mais informações, vá para Usar o recurso de modelo de exportação.

  • Copiar e colar no Power Query

    Se tiver um fluxo de dados no Power BI ou Power Apps, pode copiar as suas consultas e colá-las no editor do seu Dataflow Gen2. Essa funcionalidade permite que você migre seu fluxo de dados para o Gen2 sem ter que reescrever suas consultas. Para obter mais informações, vá para Copiar e colar consultas existentes do Dataflow Gen1.