O que há de novo no Microsoft Fabric?

  • Artigo

Esta página é atualizada continuamente com uma revisão recente das novidades doMicrosoft Fabric.

Novo no Microsoft Fabric?

Esta seção inclui artigos e comunicados para os novos usuários no Microsoft Fabric.

Mês Recurso Saiba mais
Março de 2024 O Microsoft Fabric agora é compatível com HIPAA Temos o prazer de anunciar que o Microsoft Fabric, nossa solução de análise tudo em um para negócios, conquistou novas certificações para HIPAA e ISO 27017, ISO 27018, ISO 27001, ISO 27701.
Março de 2024 O Exame DP-600 já está disponível O Exame DP-600 já está disponível, levando à certificação Microsoft Certified: Fabric Analytics Engineer Associate. O Fabric Career Hub pode ajudar você a aprender rapidamente e a obter a certificação.
Março de 2024 Preços do Copilot no Fabric: um exemplo completo O Copilot no Fabric iniciará a cobrança em 1.º de março de 2024 como parte da sua capacidade atual do Power BI Premium ou Fabric. Saiba como o uso do Copilot no Fabric é calculado.
Janeiro de 2024 Microsoft Fabric Copilot for Data Science and Data Engineering O Copilot for Data Science and Data Engineering já está disponível no mundo todo. O que o Copilot for Data Science and Data Engineering pode fazer por você?
Dezembro de 2023 Fundamentos de segurança da plataforma Fabric Saiba mais sobre a perspectiva ampla da arquitetura de segurança do Microsoft Fabric descrevendo como os principais fluxos de segurança no sistema funcionam.
Novembro de 2023 Microsoft Fabric, explicado para usuários existentes do Synapse Um foco no que os clientes que usam a versão atual da PaaS (Plataforma como Serviço) do Synapse podem esperar. Explicamos como a disponibilidade geral do Fabric se relaciona com seus investimentos atuais (spoiler: damos suporte total a eles), mas também como pensar no futuro.
Novembro de 2023 O Microsoft Fabric está agora em disponibilidade geral O Microsoft Fabric está agora em disponibilidade geral para compra. O Microsoft Fabric pode remodelar a forma como suas equipes trabalham com dados, reunindo todos em uma única plataforma baseada em IA criada para a era da inteligência artificial. Isso inclui: Power BI, Data Factory, Engenharia de Dados, Ciência de Dados, Análise em Tempo Real, Data Warehouse e a plataforma do Fabric como um todo.
Novembro de 2023 As cargas de trabalho do Fabric estão agora em disponibilidade geral! O Microsoft Fabric está agora em disponibilidade geral! O Synapse Data Warehouse do Microsoft Fabric, a Engenharia de Dados e Ciência de Dados, a Análise em Tempo Real, o Data Factory, o OneLake e a plataforma Fabric estão com disponibilidade geral.
novembrod e 2023 Implementar a arquitetura de lakehouse medallion no Fabric Uma introdução à arquitetura medallion lake e como você pode implementar um lakehouse no Microsoft Fabric.

Recursos atualmente em versão prévia

A tabela a seguir lista os recursos do Microsoft Fabric que estão atualmente em versão prévia. As versões prévias dos recursos estão classificadas em ordem alfabética.

Observação

Os recursos em versão prévia no momento estão disponíveis em termos de uso complementares. Examine os termos legais que se aplicam aos recursos do Azure que estão em versão beta, versão prévia ou que ainda não foram lançados em disponibilidade geral. O Banco de Dados SQL do Azure fornece versões prévias para dar a você a oportunidade de avaliar e compartilhar comentários com o grupo de produtos nos recursos antes que eles se entrem em GA (disponibilidade geral).

Recurso Saiba mais
Preview de CI/CD para pipelines de dados do Fabric A integração do Git e a integração de pipelines de implantação incorporados com pipelines de dados do Data Factory estão agora em preview. Para obter mais informações, confira Data Factory Adds CI/CD to Fabric Data Pipelines.
Preview do AutoML do Code First No Synapse Data Science, o novo recurso AutoML permite a automação do fluxo de trabalho de aprendizado de máquina. AutoML, ou machine learning automatizado, é um conjunto de técnicas e ferramentas que podem treinar e otimizar automaticamente modelos de machine learning para qualquer dado e tipo de tarefa.
Preview do ajuste de hiperparâmetros do Code-First No Synapse Data Science, o FLAML agora está integrado para ajuste de hiperparâmetros, atualmente uma versão prévia do recurso. O recurso flaml.tune do Fabric simplifica esse processo, oferecendo uma abordagem econômica e eficiente para o ajuste de hiperparâmetros.
O Copilot no Fabric (preview) está disponível no mundo todo O Copilot no Fabric (preview) já está disponível para todos os clientes, incluindo o Copilot para Power BI, o Data Factory e o Data Science & Data Engineering. Leia mais na nossa Visão geral do Copilot no Fabric.
Versão prévia do Data Activator Temos o prazer de anunciar que o Data Activator está agora em versão prévia e está habilitado para todos os usuários existentes no Microsoft Fabric.
Engenharia de Dados: versão prévia do item Ambiente É com grande satisfação que anunciamos a versão prévia de O Ambiente no Fabric. O Ambiente é um item centralizado permite definir todas as configurações requeridas para executar um trabalho do Spark em um só lugar.
Data Wrangler para Versão prévia do DataFrames do Spark O Data Wrangler agora oferece suporte a DataFrames em versão prévia, os usuários agora podem editar DataFrames do Spark além dos DataFrames do pandas com o Data Wrangler.
Domínios no OneLake (visualização) Os domínios no OneLake ajudam você a organizar seus dados em uma malha lógica de dados, permitindo a governança federada e otimizando para as necessidades dos negócios. Agora você pode criar subdomínios, domínios padrão para usuários e mover espaços de trabalho entre domínios. Para obter mais informações, confira Domínios do Fabric.
Visão geral do Eventhouse: manipulando dados em tempo real com o Microsoft Fabric O Eventhouse (versão prévia) é um espaço de trabalho dinâmico que hospeda vários bancos de dados KQL, parte da Análise em Tempo Real do Fabric. Um Eventhouse oferece uma solução robusta para gerenciar e analisar volumes substanciais de dados em tempo real. Comece com um guia para Criar e gerenciar um Eventhouse.
Pasta no espaço de trabalho (preview) Como uma unidade organizacional no espaço de trabalho, a pasta aborda esse problema encontrado fornecendo uma estrutura hierárquica para organizar e gerenciar seus itens. Para obter mais informações, confira Criar pastas em espaços de trabalho (preview).
Integração de dados locais com o Microsoft Fabric usando pipeline de dados na versão prévia do Data Factory Você pode usar o gateway de dados local, atualmente uma versão prévia do recurso, para se conectar a fontes de dados locais usando fluxos de dados e pipelines de dados com o Data Factory. Para obter mais informações, consulte Como acessar fontes de dados locais no Data Factory para o Microsoft Fabric.
Visualização do consumo do Kusto Cache A versão prévia do consumo do Kusto Cache significa que você começará a ver o consumo faturável do medidor de dados armazenados em cache do OneLake do banco de dados KQL e de itens do Eventhouse. Para obter mais informações, consulte Consumo do banco de dados KQL.
Suporte do Lakehouse para pipelines de implantação e integração do Git (versão prévia) O Lakehouse agora se integra aos recursos de gerenciamento do ciclo de vida no Microsoft Fabric, fornecendo uma colaboração padronizada entre todos os membros da equipe de desenvolvimento durante toda a vida útil do produto. O gerenciamento do ciclo de vida facilita um processo eficaz de versão e lançamento do produto, fornecendo continuamente recursos e correções de bugs em vários ambientes.
Pontos de extremidade privados gerenciados (preview) Os pontos de extremidade privados gerenciados para o Microsoft Fabric permitem conexões seguras por redes virtuais gerenciadas para fontes de dados que estão atrás de um firewall ou que não podem ser acessadas pela Internet pública.
Redes virtuais gerenciadas (preview) Redes virtuais gerenciadas são redes virtuais criadas e gerenciadas pelo Microsoft Fabric para cada espaço de trabalho do Fabric.
O conector do Microsoft 365 agora dá suporte à ingestão de dados no seu Lakehouse (versão prévia) O conector do Microsoft 365 agora dá suporte à ingestão de dados nas tabelas do Lakehouse.
APIs de administração do Microsoft Fabric As APIs de administração do Fabric são projetadas para simplificar as tarefas administrativas. O conjunto inicial de APIs de Administração do Fabric é adaptado para simplificar a descoberta de espaços de trabalho, itens do Fabric e detalhes de acesso do usuário.
APIs de usuário do Microsoft Fabric Temos o prazer de anunciar a versão prévia das APIs de Usuário do Microsoft Fabric. As APIs de usuário do Fabric são um grande facilitador para que empresas e parceiros usem o Microsoft Fabric, pois permitem a interação totalmente automatizada de ponta a ponta com o serviço, possibilitam a integração do Microsoft Fabric em aplicativos Web externos e, em geral, habilitam os clientes e os parceiros a e suas soluções com mais facilidade.
Espelhamento no Microsoft Fabric (preview) Com o Espelhamento no Fabric, você pode facilmente trazer seus bancos de dados para o OneLake no Microsoft Fabric, permitindo insights sem interrupções de ETL zero quase em tempo real sobre seus dados e desbloqueando armazenamento, BI, IA e muito mais. Para obter mais informações, confira O que é o espelhamento no Fabric?.
Versão prévia da integração do Git com o notebook Os notebooks do Fabric agora oferecem integração com o Git para controle do código-fonte usando o Azure DevOps. Ele permite aos usuários controlar as versões do código do notebook com facilidade, bem como gerenciar os Git branches aproveitando as funções do Fabric Git e do Azure DevOps.
Notebook na Versão Prévia do Pipeline de Implantação Agora você também pode usar notebooks para implantar seu código em diferentes ambientes, como desenvolvimento, teste e produção. Você também pode usar regras de implantação para personalizar o comportamento dos notebooks quando eles são implantados, como alterar o Lakehouse padrão de um Notebook. Comece com pipelines de implantação e o Notebook aparecerá automaticamente no conteúdo de implantação.
Funções de acesso a dados do OneLake As funções de acesso a dados OneLake para lakehouse estão em versão preview. As permissões de função e as atribuições de usuário/grupo podem ser facilmente atualizadas por meio de uma nova interface de usuário de segurança de pasta ou via chamadas de API.
API de atalhos do OneLake As novas APIs REST para atalhos do OneLake permitem a criação programática e o gerenciamento de atalhos, atualmente em visualização. Agora você pode programaticamente criar, ler e excluir atalhos do OneLake. Por exemplo, consulte Usar APIs REST de atalhos do OneLake.
Prévia dos atalhos do OneLake para fontes de dados compatíveis com o S3 Os atalhos do OneLake para fontes de dados compatíveis com o S3 estão em prévia. Crie um atalho compatível do Amazon S3 para se conectar aos seus dados existentes por meio de um único Namespace agrupado sem precisar copiar ou mover dados.
Prévia dos atalhos do OneLake para Google Cloud Storage Os atalhos do OneLake para Google Cloud Storage estão em prévia. Crie um atalho do armazenamento em nuvem do Google para se conectar aos seus dados existentes por meio de um único namespace agrupado sem precisar copiar ou mover dados.
Serviços de IA do Azure pré-criados na visualização do Fabric A visualização de serviços de IA pré-criados no Fabric é uma integração com os Serviços de IA do Azure, anteriormente conhecidos como Serviços Cognitivos do Azure. Os serviços de IA do Azure pré-criados permitem aprimorar facilmente os dados com modelos de IA pré-criados sem nenhum pré-requisito. Atualmente, os serviços de IA pré-criados estão em versão prévia e incluem suporte para o Serviço OpenAI do Azure da Microsoft, a Linguagem de IA do Azure e o Tradutor de IA do Azure.
Pontos de extremidade privados para o Microsoft Fabric (versão prévia) Os pontos de extremidade privados gerenciados para Microsoft Fabric (versão prévia) permitem conexões seguras com fontes de dados que estão atrás de um firewall ou não podem ser acessadas pela Internet pública. Para obter mais informações, confira Introducing Managed Private Endpoints for Microsoft Fabric in Preview.
Suporte a Link Privado para Microsoft Fabric (versão prévia) O Azure Private Link para Microsoft Fabric protege o acesso aos seus dados confidenciais no Microsoft Fabric fornecendo isolamento de rede e aplicando os controles necessários ao tráfego de rede de entrada. Para obter mais informações, consulte Anunciando o suporte a Link Privado do Azure para o Microsoft Fabric na versão Preview.
APIs REST para visualização de pipelines de Data Factory do Fabric (Preview) As APIs REST para visualização de pipelines de Data Factory do Fabric estão na versão Preview. As APIs REST para pipelines do Data Factory permitem estender o recurso interno do Fabric para criar, ler, atualizar, excluir e listar pipelines.
Versão prévia do complemento do Splunk O complemento Microsoft Fabric para Splunk permite que os usuários ingiram logs da plataforma Splunk em um BD KQL do Microsoft Fabric usando o SDK do Python Kusto.
Acesso confiável ao espaço de trabalho (versão prévia) para atalhos do OneLake O acesso confiável ao espaço de trabalho (versão prévia) permite acesso seguro e contínuo a contas de armazenamento do ADLS Gen2 a partir dos atalhos do OneLake no Fabric. Para obter mais informações, consulte Acesso confiável ao espaço de trabalho (versão prévia).
Atualizar registros em um banco de dados KQL (preview) O comando .update agora está disponível como uma visão prévia do recurso. Saiba mais sobre como atualizar registros em um banco de dados Kusto.
Pontos de restauração do depósito e restauração no local Agora você pode criar pontos de restauração e executar uma restauração no local de um depósito para um ponto no tempo no passado. A restauração in-loco é uma parte essencial da recuperação do data warehouse que permite restaurar o data warehouse para um estado conhecido anterior confiável, substituindo o data warehouse existente a partir do qual o ponto de restauração foi criado.

Recursos geralmente disponíveis

A seguinte tabela lista os recursos do Microsoft Fabric que foram transferidos da versão geral para a GA (Disponibilidade Geral) nos últimos 12 meses.

Mês Recurso Saiba mais
Abril de 2024 Link semântico GA Os links semânticos estão agora com disponibilidade geral. O pacote vem com nosso VHD padrão. Agora você pode usar o link semântico no Fabric imediatamente sem qualquer instalação de pip.
Março de 2024 Gateways VNet no Dataflow Gen2 O suporte do Gateway de Dados VNet para Dataflows Gen2 no Fabric está agora com disponibilidade geral. O gateway de dados VNet ajuda você a se conectar de Dataflows Gen2 do Fabric aos serviços de dados do Azure em uma VNet, sem a necessidade de um gateway de dados local.
novembrod e 2023 O Microsoft Fabric está agora em disponibilidade geral O Microsoft Fabric está agora em disponibilidade geral para compra. O Microsoft Fabric pode remodelar a forma como suas equipes trabalham com dados, reunindo todos em uma única plataforma baseada em IA criada para a era da inteligência artificial. Isso inclui: Power BI, Data Factory, Engenharia de Dados, Ciência de Dados, Análise em Tempo Real, Data Warehouse e a plataforma do Fabric como um todo.

Comunidade

Esta seção resume as novas oportunidades da comunidade Microsoft Fabric para possíveis e atuais influenciadores e MVPs.

Mês Recurso Saiba mais
Março de 2024 Receber um exame de certificação gratuito do Microsoft Fabric Torne-se elegível para um exame de certificação gratuito ao concluir o Fabric AI Skills Challenge. O Fabric Analytics Engineer AI Skills Challenge ficará aberto até 19 de abril de 2024.
Março de 2024 O Exame DP-600 já está disponível O Exame DP-600 já está disponível, levando à certificação Microsoft Certified: Fabric Analytics Engineer Associate. O Fabric Career Hub pode ajudar você a aprender rapidamente e a obter a certificação.
Março de 2024 Conferência da Comunidade do Microsoft Fabric Junte-se a nós em Las Vegas de 26 a 28 de março de 2024 para a primeira conferência anual da comunidade do Microsoft Fabric. Veja em primeira mão como o Microsoft Fabric e o resto dos produtos de dados e IA da Microsoft podem ajudar sua organização a se preparar para a era da IA. Registre-se hoje usando o código MSCUST para um desconto exclusivo!
Março de 2024 Anunciando os ganhadores do "Hack Together: The Microsoft Fabric Global AI Hack" Recebemos 50 inscrições de projetos no Hackathon de mais de 100 participantes de todo o mundo. Nossos juízes ficaram impressionados com a amplitude, a profundidade e a qualidade geral dos inscritos. Conheça os vencedores do Fabric Global AI Hack!
Janeiro de 2024 Anúncio do Fabric Career Hub O novo Fabric Career Hub é a sua parada única para o crescimento profissional! Criamos uma jornada de aprendizado abrangente com o melhor treinamento gratuito, sob demanda e ao vivo, além de descontos em exames.
Janeiro de 2024 Hack Together: The Microsoft Fabric Global AI Hack O Hack Together é um hackathon online global a ser realizado de 15 de fevereiro a 4 de março de 2024. Junte-se a nós no Hack Together: The Microsoft Fabric Global AI Hack, um evento virtual em que você pode aprender, experimentar e raquear com o novo Copilot e recursos de IA no Microsoft Fabric. Para obter mais informações, confira Microsoft Fabric Global AI Hack.
Dezembro de 2023 Conferência da Comunidade do Microsoft Fabric Junte-se a nós em Las Vegas de 26 a 28 de março de 2024 para a primeira conferência anual da comunidade do Microsoft Fabric. Veja em primeira mão como o Microsoft Fabric e o resto dos produtos de dados e IA da Microsoft podem ajudar sua organização a se preparar para a era da IA. Inscreva-se hoje para mergulhar no futuro dos dados e da IA e conectar-se com milhares de inovadores de dados como você, ansiosos para compartilhar seus insights.
Dezembro de 2023 Desafio de Habilidades de Nuvem no Fabric Junte-se aos milhares de profissionais que concluíram o Microsoft Fabric Challenge como parte do Microsoft Ignite Cloud Skills Challenge. Em menos de 8 horas, saiba como conectar, ingerir, armazenar, analisar e gerar relatórios dos dados com o Power BI e Microsoft Fabric. O desafio do Microsoft Fabric prepara você para a certificação Microsoft Certified: Fabric Analytics Engineer Associate, disponível em breve. O desafio estará em vigor até 15 de janeiro de 2024.
Novembro de 2023 Espaço de MVP do Microsoft Fabric – Edição Especial (Ignite) Uma edição especial da série de blogs "Espaço de MVP do Microsoft Fabric" destaca o conteúdo selecionado relacionado ao Fabric e criado por MVPs durante a conferência Microsoft Ignite 2023, quando anunciamos o Microsoft Fabric em disponibilidade geral.
novembrod e 2023 Capacite-se no Fabric com o Desafio de Habilidades Cognitivas na Nuvem do Microsoft Learn Temos o prazer de anunciar o Microsoft Ignite: Microsoft Fabric Challenge como parte do Desafio de Habilidades de Nuvem do Microsoft Learn. Capacite-se para cenários tecnológicos em demanda e entre para ganhar um passe VIP para o próximo Microsoft Ignite. O desafio estará em vigor até 15 de janeiro de 2024. O desafio ajuda você a se preparar para a certificação Microsoft Certified: Fabric Analytics Engineer Associate e para as novas credenciais Microsoft Applied Skills que abordam os cenários de lakehouse e data warehouse, que serão lançados nos próximos meses.

Power BI

As atualizações do Power BI Desktop e do serviço Power BI estão resumidas em O que há de novo no Power BI?

Amostras e diretrizes do Fabric

Esta seção resume as novas diretrizes e recursos de projeto de exemplo do Azure Synapse Analytics.

Mês Recurso Saiba mais
Março de 2024 Proteja as informações de PII no seu Lakehouse do Microsoft Fabric com IA responsável Uma maneira possível de usar a IA do Azure para identificar e extrair informação de identificação do usuário (PII) no Microsoft Fabric é usar a Linguagem de IA do Azure para detectar e categorizar entidades de PII em dados de texto, como nomes, endereços, emails, números de telefone, números do seguro social etc.
Fevereiro de 2024 Criando arquiteturas de dados comuns com o OneLake no Microsoft Fabric Leia mais sobre padrões comuns de arquitetura de dados e como eles podem ser protegidos com o Microsoft Fabric e os blocos de construção básicos de segurança do OneLake.
Janeiro de 2024 Nova certificação do Fabric e Fabric Career Hub Disponibilidade beta por tempo limitado do Microsoft Certification Exam DP-600: Implementing Analytics Solutions with Microsoft Fabric. A aprovação nesse exame garante a certificação Microsoft Certified: Fabric Analytics Engineer Associate.
Dezembro de 2023 Trabalhando com o OneLake usando o Gerenciador de Armazenamento do Azure Se você quiser usar um aplicativo que se integre diretamente com o Explorador de Arquivos do Windows, confira o explorador de arquivos OneLake. Porém, se você estiver acostumado a usar o Gerenciador de Armazenamento do Azure nas suas tarefas de gerenciamento de dados, poderá continuar a aproveitar suas funcionalidades com o OneLake e alguns de seus principais benefícios.
Novembro de 2023 Link semântico: modelos semânticos integrados do OneLake O link semântico adiciona suporte para os modelos semânticos integrados do OneLake que acabaram de ser lançados. Agora você pode acessar dados diretamente usando o nome do modelo semântico por meio do OneLake usando a função read_table e o novo parâmetro mode definido como onelake.
novembrod e 2023 Integrar dados SAP ao Microsoft Fabric Usar a conectividade interna do Microsoft Fabric é a maneira mais fácil e de menor esforço para adicionar dados de SAP ao seu patrimônio de dados do Fabric.
novembrod e 2023 O Fabric alterando o jogo: validar dependências com Link Semântico – Qualidade de Dados Siga este exemplo passo a passo de como explorar as dependências funcionais entre as colunas em uma tabela usando o link semântico. O link semântico é um recurso que permite estabelecer uma conexão entre os conjuntos de dados do Power BI e a Ciência de Dados do Synapse no Microsoft Fabric.
novembrod e 2023 Implementar a arquitetura de lakehouse medallion no Fabric Uma introdução à arquitetura medallion lake e como você pode implementar um lakehouse no Microsoft Fabric.

Microsoft Copilot no Microsoft Fabric

Com o Copilot e outros recursos de IA generativa em preview, o Microsoft Fabric apresenta uma nova maneira de transformar e analisar dados, gerar insights e criar visualizações e relatórios. Para obter mais informações, confira Copilot no Fabric.

Observação

A partir de 20 de maio de 2024, o Copilot no Microsoft Fabric será habilitado por padrão para todos os locatários.

Mês Recurso Saiba mais
Fevereiro de 2024 Fabric Change the Game: How easy is it to use Copilot in Microsoft Fabric Esta postagem no blog mostra como é simples habilitar o Copilot, uma IA generativa que apresenta novas maneiras de transformar e analisar dados, gerar insights e criar visualizações e relatórios no Microsoft Fabric.
Fevereiro de 2024 Copilot para Data Factory no Microsoft Fabric O Copilot para Data Factory no Microsoft Fabric agora está disponível em preview e está incluído na experiência do Dataflow Gen2. Para obter mais informações, confira Copilot para Data Factory.
Janeiro de 2024 Microsoft Fabric Copilot for Data Science and Data Engineering O Copilot for Data Science and Data Engineering já está disponível no mundo todo. O que o Copilot for Data Science and Data Engineering pode fazer por você?
Janeiro de 2024 Como habilitar o Copilot no Fabric para todo mundo Siga este guia para habilitar o Copilot no Fabric (preview) para todas as pessoas da sua organização. Para obter mais informações, confira Visão geral do Copilot para Microsoft Fabric (preview).
Janeiro de 2024 O Copilot no Fabric (preview) está disponível no mundo todo O Copilot no Fabric (preview) já está disponível para todos os clientes, incluindo o Copilot para Power BI, o Data Factory e o Data Science & Data Engineering. Leia mais na nossa Visão geral do Copilot no Fabric.
novembrod e 2023 Capacitar os usuários do Power BI com o Microsoft Fabric e o Copilot É com grande satisfação que anunciamos a disponibilidade geral do Microsoft Fabric e o preview do Copilot no Microsoft Fabric, incluindo a experiência para o Power BI.
novembrod e 2023 Copilot para Power BI no Microsoft Fabric (preview) Estamos entusiasmados em anunciar o preview do Copilot no Microsoft Fabric, incluindo a experiência do Power BI, que ajuda os usuários a começar rapidamente, ajudando-os a criar relatórios na experiência Web do Power BI. Para obter mais informações, confira Copilot para Power BI.

Data Factory no Microsoft Fabric

Esta seção resume os novos recursos e funcionalidades recentes do Data Factory no Microsoft Fabric. Acompanhe os problemas e comentários por meio do Fórum da Comunidade do Data Factory.

Mês Recurso Saiba mais
Abril de 2024 Atividade de definição de trabalho do Spark Com a nova atividade de definição de trabalho do Spark, você poderá executar uma definição de trabalho do Spark em seu pipeline.
Abril de 2024 Warehouse do Fabric na atividade Copy do ADF Você agora pode se conectar ao Warehouse do Fabric em um pipeline do Azure Data Factory/Synapse. Você pode encontrar esse novo conector ao criar uma nova origem ou destino de coletor em sua atividade Copy, na atividade Pesquisa, na atividade Procedimento Armazenado, na atividade Script e na atividade Obter Metadados.
Abril de 2024 Edição do tipo de coluna para compatibilidade com a tabela de destino adicionada ao Warehouse do Fabric e a outros armazenamentos de dados do SQL Ao mover dados de qualquer fonte de dados compatível com o Warehouse do Fabric ou outros armazenamentos de dados do SQL (SQL Server, Banco de Dados SQL do Azure, Instância Gerenciada de SQL do Azure ou Azure Synapse Analytics) por meio de pipelines de dados, os usuários agora podem especificar o tipo de dados para cada coluna.
Abril de 2024 Melhorias de desempenho ao gravar dados no SFTP O conector SFTP foi melhorado para oferecer melhor desempenho ao gravar no SFTP como destino.
Abril de 2024 Suporte ao método de autenticação de Nome da Entidade de Serviço para gateways de dados locais e VNET As Entidades de Serviço (SPN) do Azure agora são compatíveis com gateways de dados locais e gateways de dados VNET. Saiba como aproveitar o método de autenticação da entidade de serviço no Azure Data Lake Storage, no Dataverse, no Banco de Dados SQL do Azure, no conector da Web e muito mais.
Abril de 2024 Conectores certificados novos e atualizados O SDK do Power Query e o processo de Certificação do Conector do Power Query introduziram 11 conectores personalizados novos e atualizados do Power Query.
Abril de 2024 Nova experiência do Construtor de Expressões Uma nova experiência na atividade de scripts em pipelines do Data Factory do Fabric para facilitar ainda mais a criação de expressões usando a linguagem de expressão de pipeline.
Abril de 2024 O Data Factory aumenta o máximo de atividades por pipeline para 80 Dobramos o limite do número de atividades que é possível definir em um pipeline de 40 para 80.
Abril de 2024 APIs REST para visualização de pipelines de Data Factory do Fabric (Preview) As APIs REST para visualização de pipelines de Data Factory do Fabric estão na versão Preview. As APIs REST para pipelines do Data Factory permitem estender o recurso interno do Fabric para criar, ler, atualizar, excluir e listar pipelines.
Março de 2024 Cópia rápida no Dataflows Gen2 Com a Cópia rápida, você pode ingerir terabytes de dados com a experiência fácil de fluxos de dados, mas com o back-end escalável da atividade Copy do pipeline.
Março de 2024 Integrating On-Premises Data into Microsoft Fabric Using Data Pipelines in Data Factory (preview) Usando o gateway de dados local, atualmente um recurso em preview, os clientes podem se conectar a fontes de dados locais usando fluxos de dados e pipelines de dados com o Data Factory. Para obter mais informações, confira Como acessar fontes de dados locais no Data Factory para o Microsoft Fabric.
Março de 2024 Preview de CI/CD para pipelines de dados do Fabric A integração do Git e a integração de pipelines de implantação incorporados com pipelines de dados do Data Factory estão agora em preview. Para obter mais informações, confira Data Factory Adds CI/CD to Fabric Data Pipelines.
Março de 2024 Procurar recursos do Azure com Obter Dados Saiba como procurar e conectar a todos os recursos do Azure com a funcionalidade 'procurar Azure' em Obter Dados. Você pode procurar recursos do Azure e conectar facilmente aos recursos do Synapse, do armazenamento de blob ou do ADLS Gen2.
Março de 2024 Suporte ao Dataflow Gen2 para gateways VNet agora com disponibilidade geral O suporte do Gateway de Dados VNet para Dataflows Gen2 no Fabric está agora com disponibilidade geral. O gateway de dados VNet ajuda você a se conectar de Dataflows Gen2 do Fabric aos serviços de dados do Azure em uma VNet, sem a necessidade de um gateway de dados local.
Março de 2024 Suporte a níveis de privacidade no Dataflows Agora você pode definir níveis de privacidade para suas conexões no Dataflow Gen2. Os níveis de privacidade são fundamentais para configurar corretamente para que os dados confidenciais sejam visualizados apenas por usuários autorizados.
Março de 2024 Copiar dados para o S3 compatível usando o pipeline de dados do Data Factory do Fabric A cópia de dados para o S3 compatível agora está disponível no pipeline de dados do Data Factory do Fabric! Você pode usar o assistente Copiar e a atividade Copiar no pipeline de dados para realizar essa movimentação de dados.
Fevereiro de 2024 Destinos de dados do Dataflows Gen2 e configurações gerenciadas Novos recursos para o Dataflows Gen2 incluem destinos, configurações gerenciadas e tópicos avançados.
Fevereiro de 2024 Copilot para Data Factory no Microsoft Fabric O Copilot para Data Factory no Microsoft Fabric agora está disponível em preview e está incluído na experiência do Dataflow Gen2. Para obter mais informações, confira Copilot para Data Factory.
Fevereiro de 2024 Atualizações do Conector certificado O SDK do Power Query permite que você crie novos conectores tanto para o Power BI quanto para o fluxo de dados. Novos conectores certificados do Power Query estão disponíveis para a lista de Conectores Certificados no Power Query.
Fevereiro de 2024 Atualizações do conector de pipeline de dados Novos conectores estão disponíveis em seus pipelines de dados do Data Factory, incluindo fontes de dados compatíveis com o S3 e do Google Cloud Storage. Para obter mais informações, consulte Conectores de pipeline de dados no Microsoft Fabric.
Dezembro de 2023 Ler e gravar no Fabric Lakehouse usando o Azure Data Factory (ADF) Agora você pode ler e gravar dados no Microsoft Fabric Lakehouse a partir do ADF (Azure Data Factory). Usando a atividade Copy ou os fluxos de dados de mapeamento, você pode ler, gravar, transformar e processar dados usando o ADF ou o Synapse Analytics, atualmente em preview.
Dezembro de 2023 Definir o estado da atividade para facilitar a depuração do pipeline Nos pipelines de dados do Fabric Data Factory, agora você pode definir o estado de uma atividade como inativo para que possa salvar seu pipeline mesmo com configurações incompletas e inválidas. Pense nisso como "comentar" parte do código do seu pipeline.
Dezembro de 2023 Edição de conexão no editor do pipeline Agora você pode editar suas conexões de dados existentes enquanto estiver projetando seu pipeline sem sair do editor do pipeline! Ao configurar sua conexão, selecione Editar e um pop-up aparece.
Dezembro de 2023 Execuções do Azure Databricks Notebook no Fabric Data Factory Agora você pode criar poderosos fluxos de trabalho do pipeline de dados que incluem execuções do Notebook a partir dos seus clusters do Azure Databricks usando o Fabric Data Factory. Adicione uma atividade do Databricks ao pipeline, aponte para o cluster existente ou solicite um novo cluster. O Data Factory executará o código do Notebook para você.
novembrod e 2023 Implementar a arquitetura de lakehouse medallion no Fabric Uma introdução à arquitetura medallion lake e como você pode implementar um lakehouse no Microsoft Fabric.
novembrod e 2023 Disponibilidade Geral do Dataflow Gen2 dos conectores do Fabric Os conectores para Lakehouse, Warehouse e Banco de dados KQL estão agora em disponibilidade geral. Recomendamos que você use esses conectores ao tentar se conectar aos dados de qualquer uma dessas cargas de trabalho do Fabric.
novembrod e 2023 Dataflow Gen2 Cancelamento automático de atualização Para evitar o consumo de recursos desnecessários, há um novo mecanismo que interrompe a atualização de um fluxo de dados assim que se sabe que os resultados da atualização não têm impacto. Isto é para reduzir o consumo de forma mais proativa.
novembrod e 2023 Propagação de mensagem de erro do Dataflow Gen2 através do gateway Aprimoramos o diagnóstico para fornecer mensagens de erro significativas quando a atualização do fluxo de dados falhar para os fluxos de dados executados através do Gateway de Dados Enterprise.
novembrod e 2023 Suporte do Dataflow Gen2 para associação de colunas para o conector SAP HANA O suporte à associação de colunas está habilitado para o SAP HANA. Esse parâmetro opcional resulta em um desempenho significativamente melhor. Para obter mais informações, confira Suporte para associação de colunas para o conector SAP HANA.
novembrod e 2023 Artefatos do processo de preparo do Dataflow Gen2 ocultos Quando estiverem usando um Dataflow Gen2 no Fabric, o sistema criará automaticamente um conjunto de artefatos de processo de preparo. Agora, esses artefatos de processo de preparo serão abstraídos da experiência do Dataflow Gen2 e ficarão ocultos na lista de espaços de trabalho. Nenhuma ação é requerida pelo usuário e essa alteração não tem impacto sobre os fluxos de dados existentes.
novembrod e 2023 Suporte do Dataflow Gen2 para versão prévia de Gateways de VNet O suporte do Gateway de Dados da VNet para Dataflows Gen2 no Fabric está agora em versão prévia. O gateway de dados VNet ajuda você a se conectar de Dataflows Gen2 do Fabric aos serviços de dados do Azure em uma VNet, sem a necessidade de um gateway de dados local.
novembrod e 2023 "Salvar como" entre espaços de trabalho Agora é possível clonar seus pipelines de dados entre espaços de trabalho usando o botão "Salvar como".
novembrod e 2023 Integração de submenus de conteúdo dinâmico com atividades de Email e Equipes Nas atividades de Email e Equipes, agora é possível adicionar conteúdo dinâmico com facilidade. Com essa nova integração de expressão de pipeline, agora você verá um submenu para ajudar você a selecionar e criar o conteúdo da mensagem rapidamente, sem precisar aprender a linguagem de expressão de pipeline.
novembrod e 2023 A atividade Copy agora dá suporte para tolerância a falhas para o conector Fabric Data Warehouse A atividade Copy nos pipelines de dados agora apresenta suporte para tolerância a falhas no Fabric Warehouse. A tolerância a falhas permite que você trate certos erros sem interromper a movimentação de dados. Ao habilitar a tolerância a falhas, você pode continuar a copiar os dados enquanto ignora dados incompatíveis, como linhas duplicadas.
novembrod e 2023 Conectores do MongoDB e do MongoDB Atlas Os conectores do MongoDB e do MongoDB Atlas agora estão disponíveis para uso nos pipelines de dados do Data Factory como origens e destinos.
novembrod e 2023 O conector do Microsoft 365 agora dá suporte à ingestão de dados no seu Lakehouse (versão prévia) O conector do Microsoft 365 agora dá suporte à ingestão de dados nas tabelas do Lakehouse.
novembrod e 2023 Suporte multitarefa para editar pipelines no designer Agora você pode abrir e editar pipelines de dados de diferentes espaços de trabalho e navegar entre eles usando as funcionalidades de várias tarefas no Fabric.
novembrod e 2023 Interpolação da cadeia de caracteres adicionada ao valor de retorno do pipeline Agora é possível editar suas conexões de dados nos seus pipelines de dados. Anteriormente, uma nova guia era aberta quando as conexões precisavam ser editadas. Agora, você pode permanecer no seu pipeline e atualizar suas conectividades sem problemas.

Exemplos e diretrizes do Data Factory no Microsoft Fabric

Mês Recurso Saiba mais
Fevereiro de 2024 Pipelines de dados do Fabric – técnicas avançadas de agendamento Esta série de postagens no blog aborda técnicas avançadas de agendamento em pipelines de dados do Microsoft Fabric.
Janeiro de 2024 Automatizar consultas e comandos de data warehouse do Fabric com o Data Factory No Data Factory do Fabric, há muitas maneiras de consultar e recuperar dados, além de executar comandos do warehouse usando atividades de pipeline que podem ser facilmente automatizadas.
Janeiro de 2024 Usar pipelines de dados do Data Factory do Fabric para orquestrar fluxos de trabalho baseados em Notebook Diretrizes e boas práticas ao criar fluxos de trabalho do Notebook do Spark no Fabric usando o Data Factory no Fabric com pipelines de dados.
Dezembro de 2023 Ler dados de tabelas do Delta Lake com a função DeltaLake.Table em M O DeltaLake.Table é uma nova função na linguagem M do Power Query para leitura de dados de tabelas do Delta Lake. Essa função agora está disponível no Power Query no Power BI Desktop e nos Dataflows Gen1 e Gen2. Assim, você não precisa usar a solução desenvolvida pela comunidade.

Engenharia de Dados do Synapse no Microsoft Fabric

Esta seção resume os novos recursos e capacidades da carga de trabalho de Engenharia de Dados no Microsoft Fabric.

Mês Recurso Saiba mais
Abril de 2024 Admissão otimista de trabalhos no Fabric Spark A Admissão otimista de trabalhos no Fabric Spark reduz a frequência de erros de limitação (HTTP 430: Capacidade de resposta com limite excedido do Spark) e melhora a experiência de admissão de trabalhos dos nossos clientes, principalmente durante os horários de pico de uso.
Abril de 2024 Suporte a nó único para pools iniciais O recurso Suporte a nó único para pools iniciais permite que você configure seu pool inicial para um máximo de um nó e obtenha tempos de início de sessão super-rápidos para suas sessões do Spark.
Abril de 2024 Imagem de contêiner para o VS Code do Synapse Para simplificar o processo de desenvolvimento, liberamos uma imagem de contêiner para o VS Code do Synapse que contém todas as dependências necessárias para a extensão.
Abril de 2024 Definição de trabalho do Spark com integração do Git As definições de trabalho do Spark com integração do Git permitem que você verifique as alterações de suas definições de trabalho do Spark em um repositório Git, que inclui o código-fonte dos trabalhos do Spark e outras propriedades de itens.
Abril de 2024 Nova experiência do Pesquisador de Objetos no notebook A nova experiência do Pesquisador de Objetos no notebook melhora a flexibilidade e a capacidade de detecção de fontes de dados no pesquisador e melhora a capacidade de detecção de pastas de recursos.
Abril de 2024 %Run seus scripts no notebook Agora você pode usar o comando %run magic para executar seus scripts Python e scripts SQL na pasta de recursos do notebook, assim como o comando %run do Jupyter Notebook.
Abril de 2024 Prévia dos atalhos do OneLake para fontes de dados compatíveis com o S3 Os atalhos do OneLake para fontes de dados compatíveis com o S3 estão em prévia. Crie um atalho compatível do Amazon S3 para se conectar aos seus dados existentes por meio de um único Namespace agrupado sem precisar copiar ou mover dados.
Abril de 2024 Prévia dos atalhos do OneLake para Google Cloud Storage Os atalhos do OneLake para Google Cloud Storage estão em prévia. Crie um atalho do armazenamento em nuvem do Google para se conectar aos seus dados existentes por meio de um único namespace agrupado sem precisar copiar ou mover dados.
Abril de 2024 Funções de acesso a dados do OneLake As funções de acesso a dados OneLake para lakehouse estão em versão preview. As permissões de função e as atribuições de usuário/grupo podem ser facilmente atualizadas por meio de uma nova interface de usuário de segurança de pasta ou via chamadas de API.
Março de 2024 Novo aprimoramento de validação para “Carregar na tabela” O novo aprimoramento de validação do recurso “Carregar na tabela” ajuda a mitigar quaisquer problemas de validação e tornar sua experiência de carregamento de dados mais suave e rápida.
Março de 2024 Enfileiramento para trabalhos de Notebook Agora, com a Fila de trabalhos para trabalhos no Notebook, os trabalhos acionados por pipelines ou pelo Job Scheduler serão adicionados a uma fila e repetidos automaticamente quando a capacidade for liberada. Para obter mais informações, consulte Enfileiramento de trabalhos no Microsoft Fabric Spark.
Março de 2024 Recurso de ajuste de consultas Autotune para Apache Spark O recurso de ajuste de consultas Autotune para Apache Spark já está disponível. O Autotune aproveita os dados históricos de suas consultas SQL do Spark e algoritmos de aprendizado de máquina para ajustar automaticamente suas configurações, garantindo tempos de execução mais rápidos e maior eficiência.
Março de 2024 Explorador de Arquivos OneLake: editar via Excel Com nossa versão mais recente v1.0.11.0 do Explorador de Arquivos, temos o prazer de anunciar que agora você pode atualizar seus arquivos diretamente usando o Excel, espelhando a experiência amigável disponível no OneDrive.
Fevereiro de 2024 Acesso confiável ao espaço de trabalho (versão prévia) para atalhos do OneLake O acesso confiável ao espaço de trabalho (preview) permite acesso seguro e integrado a contas de armazenamento do ADLS Gen2 dos atalhos do OneLake no Fabric. Para obter mais informações, consulte Acesso confiável ao espaço de trabalho (versão prévia).
Fevereiro de 2024 Reduza os custos de saída com os atalhos do S3 no OneLake Saiba como os atalhos do OneLake para o S3 agora oferecem suporte ao cache, o que pode reduzir consideravelmente os custos de saída. Use a nova configuração Ativar cache para atalhos do S3 com um atalho do S3.
Fevereiro de 2024 API de atalhos do OneLake As novas APIs REST para atalhos do OneLake permitem a criação programática e o gerenciamento de atalhos, atualmente em visualização. Agora você pode programaticamente criar, ler e excluir atalhos do OneLake. Por exemplo, consulte Usar APIs REST de atalhos do OneLake.
Fevereiro de 2024 Navegar por snippet de código O novo recurso Procurar notebook de snippet de código permite que você acesse e insira facilmente snippets de código para trechos de código comumente usados com vários idiomas suportados.
Fevereiro de 2024 Configurar tempo limite da sessão Os Notebooks agora oferecem suporte à configuração do tempo limite da sessão para a sessão ao vivo atual. Ele pode ajudá-lo a evitar o desperdício de recursos ou a perda de contexto devido ao tempo limite. Você pode especificar a duração máxima de suas sessões do Spark, de minutos a horas. Além disso, pode receber alertas antes que a sessão expire e estendê-la.
Fevereiro de 2024 Atualização da barra de status do notebook do Fabric A nova barra de status do notebook do Fabric tem três botões de informações persistentes: status da sessão, status de salvamento e status de seleção de célula. Além disso, os recursos de contexto incluem informações sobre o estado da conexão git, um atalho para estender o tempo limite da sessão e um navegador de célula com falha.
Janeiro de 2024 Microsoft Fabric Copilot for Data Science and Data Engineering O Copilot for Data Science and Data Engineering já está disponível no mundo todo. O que o Copilot for Data Science and Data Engineering pode fazer por você?
Janeiro de 2024 A versão mais recente do OneLake File Explorer inclui integração com o Excel Com a versão mais recente do OneLake File Explorer (v1.0.11.0), trazemos algumas atualizações para melhorar sua experiência com o OneLake, incluindo a Integração com o Excel.
Dezembro de 2023 %%configure – personalize sua sessão do Spark no Notebook Agora você pode personalizar sua sessão do Spark com o comando mágico %%configure, em atividades do Notebook interativo e de pipeline.
Dezembro de 2023 Pré-visualização avançada de dataframe no Notebook A função display() foi atualizada no Fabric Notebook, agora chamada de visualização avançada do dataframe. Agora, quando você usa display() para visualizar seu dataframe, você pode facilmente especificar o intervalo, exibir o resumo do dataframe e estatísticas de coluna, verificar valores inválidos ou valores ausentes e visualizar a célula longa.
Dezembro de 2023 Trabalhando com o OneLake usando o Gerenciador de Armazenamento do Azure Se você quiser usar um aplicativo que se integre diretamente com o Explorador de Arquivos do Windows, confira o explorador de arquivos OneLake. Porém, se você estiver acostumado a usar o Gerenciador de Armazenamento do Azure nas suas tarefas de gerenciamento de dados, poderá continuar a aproveitar suas funcionalidades com o OneLake e alguns de seus principais benefícios.
novembrod e 2023 Acessibilidade de suporte para Lakehouse Para fornecer uma interação mais inclusiva e amigável, implementamos melhorias até o momento para dar suporte à acessibilidade no Lakehouse, incluindo compatibilidade com leitores de tela, novo fluxo de texto em design responsivo, navegação por teclado, texto alternativo para imagens e campos de formulários e rótulos.
novembrod e 2023 Experiência multitarefa aprimorada no Lakehouse Introduzimos novas funcionalidades para aprimorar a experiência multitarefa no Lakehouse, incluindo a multitarefa durante operações em execução, recarregamento sem bloqueio e notificações mais claras.
novembrod e 2023 Funcionalidades aprimoradas do DataGrid no Lakehouse Um DataGrid atualizado para a versão prévia da tabela do Lakehouse agora apresenta classificação, filtros e redimensionamento de colunas.
novembrod e 2023 Ponto de extremidade de análise do SQL provisionado novamente Agora você pode repetir o provisionamento do ponto de extremidade de Análise do SQL diretamente no Lakehouse. Assim, se a tentativa inicial de provisionamento falhar, você terá a opção de tentar novamente sem a necessidade de criar um Lakehouse totalmente novo.
novembrod e 2023 Microsoft Fabric Runtime 1.2 O Microsoft Fabric Runtime 1.2 é um avanço significativo em nossas funcionalidades de processamento de dados. O Microsoft Fabric Runtime 1.2 inclui o Apache Spark 3.4.1, Mariner 2.0 como sistema operacional, Java 11, Scala 2.12.17, Python 3.10, Delta Lake 2.4 e R 4.2.2, assegurando que você tenha as ferramentas mais avançadas à sua disposição. Além disso, essa versão vem empacotada com pacotes padrão, abrangendo uma instalação completa do Anaconda e bibliotecas essenciais para Java/Scala, Python e R, simplificando seu fluxo de trabalho.
novembrod e 2023 Suporte a Vários Runtimes Com a introdução do Runtime 1.2, o Fabric dá suporte a vários runtimes, oferecendo aos usuários a flexibilidade de alternância perfeita entre eles, minimizando o risco de incompatibilidades ou interrupções. Ao alterar os tempos de execução, todos os itens criados pelo sistema no espaço de trabalho, incluindo Lakehouses, SJDs e Notebooks, funcionarão usando a versão de runtime recém-selecionada no nível do espaço de trabalho, iniciando na próxima Sessão do Spark.
novembrod e 2023 Delta como formato de tabela padrão no novo Runtime 1.2 O parâmetro padrão spark.sql.sources.default da sessão do Spark agora é delta. Todas as tabelas criadas usando o SQL do Spark, PySpark, Scala Spark e Spark R, sempre que o tipo de tabela for omitido, criarão a tabela como Delta por padrão.
novembrod e 2023 Cache Inteligente Por padrão, o recurso Cache Inteligente recém-reformulado e otimizado está habilitado no Spark do Fabric. O cache inteligente funciona perfeitamente nos bastidores e armazena dados em cache para ajudar a acelerar a execução de trabalhos do Spark no Microsoft Fabric à medida que faz a leitura do seu armazenamento do OneLake ou ADLS Gen2 por meio de atalhos.
novembrod e 2023 Hub de monitoramento para aprimoramentos do Spark Os aprimoramentos mais recentes no hub de monitoramento foram projetados para fornecer uma exibição abrangente e detalhada das atividades do Spark e do Lakehouse, incluindo alocações de executores, versão de runtime de um aplicativo do Spark, um link de itens relacionados na página de detalhes.
novembrod e 2023 Monitoramento das operações do Lakehouse Os usuários podem agora exibir o progresso e o status dos trabalhos de manutenção do Lakehouse e das atividades de carregamento de tabelas.
novembrod e 2023 Análise do uso de recursos do aplicativo Spark Atendendo às solicitações dos clientes para o monitoramento de métricas de uso de recursos do Spark para ajuste e otimização do desempenho, temos o prazer de apresentar o recurso Análise de uso de recursos do Spark, agora disponível em versão prévia do recurso. Esse recurso recém-lançado permite que os usuários monitorem executores alocados, executores em execução e executores ociosos, juntamente com as execuções do Spark.
novembrod e 2023 Suporte da API REST para a versão prévia da Definição de Trabalho do Spark As APIs públicas REST para a Definição de Trabalho do Spark agora estão disponíveis, facilitando aos usuários gerenciar e manipular os itens do SJD.
novembrod e 2023 Suporte da API REST para o Lakehouse, carregamento para tabelas e manutenção de tabelas Como um requisito fundamental para a integração da carga de trabalho, as APIs Públicas REST para o Lakehouse já estão disponíveis. As APIs REST públicas do Lakehouse facilitam aos usuários gerenciar e manipular os itens do Lakehouse de forma programática.
novembrod e 2023 Suporte do Lakehouse para pipelines de implantação e integração do Git (versão prévia) O Lakehouse agora se integra aos recursos de gerenciamento do ciclo de vida no Microsoft Fabric, fornecendo uma colaboração padronizada entre todos os membros da equipe de desenvolvimento durante toda a vida útil do produto. O gerenciamento do ciclo de vida facilita um processo eficaz de versão e lançamento do produto, fornecendo continuamente recursos e correções de bugs em vários ambientes.
novembrod e 2023 Inserir um relatório do Power BI no Notebook É com grande satisfação que anunciamos que o pacote powerbiclient Python agora tem suporte nativo nos notebooks do Fabric. Assim, você pode facilmente inserir e interagir com os relatórios do Power BI em seus notebooks com apenas algumas linhas de código. Para obter mais informações sobre como usar o pacote powerbiclient para inserir um componente do Power BI.
novembrod e 2023 Nova API do mssparkutils: referência para executar vários notebooks em paralelo Uma nova API runMultiple no mssparkutils chamada mssparkutils.notebook.runMultiple() permite que você execute vários notebooks em paralelo ou com uma estrutura topológica predefinida. Para obter mais informações, confira Utilitários do notebook.
novembrod e 2023 Recursos do notebook com suporte para arquivos .JAR Agora, há suporte para carregar arquivos .jar no explorador de recursos do notebook. Você pode adicionar suas próprias bibliotecas compiladas, usar o recurso de arrastar e soltar para gerar um snippet de código para instalá-las na sessão e carregá-las no código de modo conveniente.
novembrod e 2023 Versão prévia da integração do Git com o notebook Os notebooks do Fabric agora oferecem integração com o Git para controle do código-fonte usando o Azure DevOps. Ele permite que os usuários controlem facilmente as versões do código do notebook e gerenciem as ramificações do Git aproveitando as funções do Git do Fabric e o Azure DevOps.
novembrod e 2023 Notebook na Versão Prévia do Pipeline de Implantação Agora você também pode usar notebooks para implantar seu código em diferentes ambientes, como desenvolvimento, teste e produção. Você também pode usar regras de implantação para personalizar o comportamento dos notebooks quando eles são implantados, como alterar o Lakehouse padrão de um Notebook. Comece com pipelines de implantação e o Notebook aparecerá automaticamente no conteúdo de implantação.
novembrod e 2023 Versão prévia da API REST do notebook Com as APIs Públicas REST para os itens do Notebook, os engenheiros de dados/cientistas de dados podem automatizar seus pipelines e estabelecer a CI/CD de forma conveniente e eficiente. A API Pública Restful do notebook pode facilitar aos usuários gerenciar e manipular itens do notebook do Fabric e integrar o notebook a outras ferramentas e sistemas.
novembrod e 2023 Versão prévia do ambiente É com grande satisfação que anunciamos a versão prévia de O Ambiente no Fabric. O Ambiente é um item centralizado permite definir todas as configurações requeridas para executar um trabalho do Spark em um só lugar.
novembrod e 2023 Extensão VS Code do Synapse na versão prévia do vscode.dev Com suporte para a extensão VS Code do Synapse no vsocde.dev, os usuários agora podem editar e executar o Fabric Notebooks sem sair da janela do navegador. Além disso, todos os recursos nativos para desenvolvedores profissionais do VS Code agora estão acessíveis aos usuários finais nesse ambiente.

Exemplos e diretrizes de Engenharia de Dados do Synapse

Mês Recurso Saiba mais
Março de 2024 Criando pontes entre Lakehouses do Fabric: feed de dados de alteração do Delta para ETL perfeito Saiba como usar o feed de dados de alteração do Delta para facilitar a sincronização de dados entre diferentes lakehouses em sua arquitetura de medalhão.
Janeiro de 2024 Usar pipelines de dados do Data Factory do Fabric para orquestrar fluxos de trabalho baseados em Notebook Diretrizes e boas práticas ao criar fluxos de trabalho do Notebook do Spark no Fabric usando o Data Factory no Fabric com pipelines de dados.
novembrod e 2023 O Fabric muda a situação: usando sua própria biblioteca com o Microsoft Fabric Um guia passo a passo para usar sua própria biblioteca Python no Lakehouse. É muito simples criar sua própria biblioteca com o Python e ainda mais simples reutilizá-la no Fabric.

Ciência de Dados do Synapse no Microsoft Fabric

Esta seção resume os aprimoramentos e recursos recentes para a Ciência de Dados no Microsoft Fabric.

Mês Recurso Saiba mais
Abril de 2024 Link semântico GA Os links semânticos estão agora com disponibilidade geral. O pacote vem com nosso VHD padrão. Agora você pode usar o link semântico no Fabric imediatamente sem qualquer instalação de pip.
Abril de 2024 Representação de nível de capacidade para IA e o Copilot Os administradores de locatários agora podem habilitar a IA e o Copilot no Fabric para toda a organização, determinados grupos de segurança ou para uma capacidade específica.
Março de 2024 Clientes da UE podem usar a IA e o Copilot sem configurações geográficas cruzadas Desde meados de março, os clientes da UE podem usar a IA e o Copilot sem ligar as configurações geográficas cruzadas, e suas solicitações de IA e do Copilot serão processadas dentro do Limite de Dados da UE.
Março de 2024 Preview do ajuste de hiperparâmetros do Code-First O FLAML agora está integrado para ajuste de hiperparâmetros, atualmente uma versão prévia do recurso. O recurso flaml.tune do Fabric simplifica esse processo, oferecendo uma abordagem econômica e eficiente para o ajuste de hiperparâmetros.
Março de 2024 Preview do AutoML do Code First Com o novo recurso AutoML, você pode automatizar seu fluxo de trabalho de aprendizado de máquina e obter os melhores resultados com menos esforço. AutoML, ou machine learning automatizado, é um conjunto de técnicas e ferramentas que podem treinar e otimizar automaticamente modelos de machine learning para qualquer dado e tipo de tarefa.
Março de 2024 Comparar execuções aninhadas As execuções pai e filho no modo Exibição de Lista de Execuções para experimentos de ML introduzem uma estrutura hierárquica, permitindo que os usuários visualizem sem esforço várias execuções pai e filho em um único modo de exibição e interajam facilmente com eles para comparar visualmente os resultados.
Março de 2024 Suporte para imposição obrigatória de rótulos de MIP Os itens de experimento e de modelo de ML no Fabric agora oferecem suporte aprimorado para rótulos de Proteção de Informações da Microsoft (MIP).
Janeiro de 2024 Microsoft Fabric Copilot for Data Science and Data Engineering O Copilot for Data Science and Data Engineering já está disponível no mundo todo. O que o Copilot for Data Science and Data Engineering pode fazer por você?
Dezembro de 2023 Atualização do Semantic Link Temos o prazer de anunciar a última atualização do Semantic Link! Além de muitas melhorias, adicionamos muitos novos recursos para a nossa comunidade de engenharia do Power BI que você pode usar em notebooks do Fabric para satisfazer todas as suas necessidades de automação.
Dezembro de 2023 Serviços de IA do Azure pré-criados na visualização do Fabric A visualização de serviços de IA pré-criados no Fabric é uma integração com os Serviços de IA do Azure, anteriormente conhecidos como Serviços Cognitivos do Azure. Os serviços de IA do Azure pré-criados permitem aprimorar facilmente os dados com modelos de IA pré-criados sem nenhum pré-requisito. Atualmente, os serviços de IA pré-criados estão em versão prévia e incluem suporte para o Serviço OpenAI do Azure da Microsoft, a Linguagem de IA do Azure e o Tradutor de IA do Azure.
novembrod e 2023 Copilot em notebooks (preview) O Copilot nos notebooks Data Science e Data Engineering do Fabric foi projetado para acelerar a produtividade, fornecer respostas e diretrizes úteis e gerar código para tarefas comuns, como exploração de dados, preparação de dados e aprendizado de máquina. É possível interagir e se envolver com a IA no painel de chats ou até mesmo nas células dos notebooks usando comandos mágicos para obter insights dos dados mais rapidamente. Para obter mais informações, confira Copilot em notebooks.
novembrod e 2023 Operações Personalizadas em Python no Data Wrangler O Data Wrangler, uma ferramenta baseada em notebook para análise exploratória de dados, sempre permitiu que os usuários navegassem e aplicassem operações comuns de limpeza de dados, gerando o código correspondente em tempo real. Agora, além de gerar código a partir da interface do usuário, os usuários também podem escrever seu próprio código com operações personalizadas no Data Wrangler.
novembrod e 2023 Data Wrangler para Versão prévia do DataFrames do Spark O Data Wrangler agora dá suporte ao DataFrames do Spark na versão prévia. Até agora, os usuários podiam explorar e transformar os DataFrames do pandas usando operações comuns que podem ser convertidas em código Python em tempo real. A nova versão permite que os usuários editem os DataFrames do Spark além dos DataFrames do pandas com o Data Wrangler.
novembrod e 2023 Widget do Notebook MLFlow O widget de criação em linha MLflow habilita os usuários a acompanhar sem esforço as execuções de suas experiências, juntamente com métricas e parâmetros, tudo diretamente de dentro de seu notebook.
Novembro de 2023 Novos aprimoramentos na usabilidade de itens de modelo e experimento Novos aprimoramentos no nosso modelo e recursos de acompanhamento de experiências são baseados em comentários valiosos dos usuários. O novo controle de árvore na exibição de detalhes da execução facilita o acompanhamento, mostrando qual execução está selecionada. Aprimoramos o recurso de comparação, permitindo ajustar facilmente o painel de comparação para uma experiência mais amigável do usuário. Agora você pode selecionar o nome da execução para obter a exibição Detalhes da Execução.
novembrod e 2023 Execuções de Experimentos Recentes Agora é mais simples para os usuários fazerem check-out das execuções recentes de uma experiência diretamente na exibição da lista de espaços de trabalho. Essa atualização facilita o acompanhamento das atividades recentes, o acesso rápido ao aplicativo Spark relacionado e a aplicação de filtros com base no status de execução.
novembrod e 2023 Modelos renomeados para Modelos de ML A Microsoft renomeou "Modelos" para "Modelos de ML" para garantir a clareza e evitar qualquer confusão com outros elementos do Fabric. Para obter mais informações, consulte Experimentos de machine learning no Microsoft Fabric.
novembrod e 2023 SynapseML v1.0 SynapseML v1.0 foi liberado. O SynapseML v1.0 facilita a compilação de sistemas de aprendizado de máquina prontos para produção no Fabric e está em uso na Microsoft há mais de seis anos.
novembrod e 2023 Treine Explainable Boosting Machines Interpretáveis com o SynapseML Introduzimos uma implementação escalonável de e Explainable Boosting Machines (EBM) da plataforma Apache Spark no SynapseML. EBMs são uma técnica avançada de aprendizado de máquina que combina a precisão do gradient boosting com um forte foco na interpretabilidade do modelo.
novembrod e 2023 Modelos de IA predefinidos na versão prévia do Microsoft Fabric Temos o prazer de anunciar a versão prévia de modelos de IA predefinidos no Fabric. Serviço OpenAI do Azure, Análise de Texto e Tradutor de IA do Azure são modelos predefinidos disponíveis no Fabric, com suporte para API REST e SynapseML. Você também pode usar a Biblioteca do OpenAI Python para acessar o serviço Azure OpenAI no Fabric.
novembrod e 2023 Reutilizando a Sessão Spark existente no sparklyr Adicionamos suporte para um novo método de conexão chamado "synapse" no sparklyr, que permite que você se conecte a uma sessão do Spark existente. Além disso, contribuímos com esse método de conectividade para o projeto sparklyr da OSS. Agora, os usuários podem usar o sparklyr e o SparkR na mesma sessão e facilmente compartilhar dados entre eles.
novembrod e 2023 Suporte à API REST para Experimentos e Modelos de ML As APIs REST para o Experimento de ML e o Modelo de ML já estão disponíveis. Essas APIs REST para experimentos de ML e modelos de ML começam a capacitar os usuários a criar e gerenciar itens de aprendizado de máquina de forma programática, um requisito-chave para a automação de pipeline e a integração de cargas de trabalho.

Exemplos e diretrizes da Ciência de Dados do Synapse

Mês Recurso Saiba mais
Março de 2024 Novos exemplos de IA Novos exemplos de AutoML, Ajuste de Modelo e Link Semântico aparecem na categoria Tutorial Rápido dos exemplos do Data Science no Microsoft Fabric.
Dezembro de 2023 Usar os dados do lakehouse do Microsoft Fabric e o prompt flow no Serviço do Azure Machine Learning para criar aplicativos RAG Um aplicativo RAG etapa a etapa por meio de prompt flow no Serviço do Azure Machine Learning combinado com os dados do lakehouse do Microsoft Fabric.
Novembro de 2023 Novo tutorial do caminho feliz da ciência de dados no Microsoft Fabric Atualizamos o tutorial Caminho Feliz da Ciência de Dados para o Microsoft Fabric. Este novo tutorial abrangente demonstra todo o fluxo de trabalho de ciência de dados, usando um problema de rotatividade de clientes de um banco como contexto.
novembrod e 2023 Novos ciência de dados de amostras Expandimos nossa coleção de amostras de ciência de dados para incluir novas amostras de R de ponta a ponta e novas amostras de tutoriais rápidos para "Explicabilidade das saídas do modelo" e "Visualização do comportamento do modelo.".
novembrod e 2023 Nova amostra de previsão de ciência de dados Os novos dados de amostra de Ciência de Dados sobre previsão de vendas foram desenvolvidos em colaboração com a Sonata Software. Essa nova amostra abrange todo o fluxo de trabalho da ciência de dados, desde a limpeza dos dados até a visualização no Power BI. O notebook aborda as etapas para desenvolver, avaliar e pontuar um modelo de previsão de vendas de superlojas, aproveitando o poder do algoritmo SARIMAX.

Data Warehouse do Synapse no Microsoft Fabric

Esta seção resume as melhorias e recursos recentes para Data Warehouse do Synapse do Microsoft Fabric.

Mês Recurso Saiba mais
Abril de 2024 Warehouse do Fabric na atividade Copy do ADF Você agora pode se conectar ao Warehouse do Fabric em um pipeline do Azure Data Factory/Synapse. Você pode encontrar esse novo conector ao criar uma nova origem ou destino de coletor em sua atividade Copy, na atividade Pesquisa, na atividade Procedimento Armazenado, na atividade Script e na atividade Obter Metadados.
Abril de 2024 Integração do Git A integração do Git para o Warehouse permite que você verifique as alterações do seu Warehouse em um repositório Git do Azure DevOps como um projeto de banco de dados do SQL.
Abril de 2024 Eliminação de partição A eliminação de partições é uma melhoria de desempenho para tabelas com um número grande de arquivos. O ponto de extremidade de análise SQL de um Lakehouse usa a eliminação de partição para ler dados somente das partições que são relevantes para a consulta. Melhorias recentes aumentaram ainda mais o desempenho quando as consultas são direcionadas a algumas partições em uma tabela que tem muitos arquivos.
Março de 2024 Espelhamento no Microsoft Fabric (preview) Com o Espelhamento no Fabric, você pode facilmente trazer seus bancos de dados para o OneLake no Microsoft Fabric, permitindo insights sem interrupções de ETL zero quase em tempo real sobre seus dados e desbloqueando armazenamento, BI, IA e muito mais. Para obter mais informações, confira O que é o espelhamento no Fabric?.
Março de 2024 Melhorias no desempenho do cache frio O Fabric armazena dados em tabelas Delta e, quando os dados não são armazenados em cache, ele precisa transcodificar dados de estruturas de formato de arquivo parquet para estruturas na memória para processamento de consultas. Melhorias recentes no desempenho do cache frio otimizam ainda mais a transcodificação, e observamos consultas até 9% mais rápidas em nossos testes quando os dados não são armazenados em cache anteriormente.
Março de 2024 Extrair e publicar um projeto de banco de dados SQL diretamente por meio do editor DW A extensão de projetos de bancos de dados SQL cria um arquivo (.sqlproj) de projeto, uma representação local de objetos SQL que compõem o esquema de um banco de dados individual, como tabelas, procedimentos armazenados ou funções. Agora você pode extrair e publicar um projeto de banco de dados SQL diretamente por meio do editor DW.
Março de 2024 Alterar proprietário do item de depósito A nova API Takeover permite que você altere o proprietário do depósito do proprietário atual para um novo proprietário, que pode ser um SPN ou uma conta institucional.
Março de 2024 Clonar tabela RLS e CLS Uma tabela de clones agora herda a segurança em nível de linha (RLS) e a máscara dinâmica de dados da origem da tabela de clones.
Fevereiro de 2024 Experimente melhorias de desempenho Os aprimoramentos recentes de conectividade e desempenho incluem uma experiência aprimorada para a criação de depósitos, execução T-SQL, descoberta automática de metadados e mensagens de erro.
Dezembro de 2023 Automatic Log Checkpointing for Fabric Warehouse O Automatic Log Checkpointing é um dos agentes que ajuda o Data Warehouse a apresentar um ótimo desempenho. E a melhor notícia: você não precisa fazer tarefas adicionais para isso!
Dezembro de 2023 Pontos de restauração e restauração no local Agora você pode criar pontos de restauração e executar uma restauração no local de um depósito para um ponto no tempo no passado. Os recursos de pontos de restauração e restauração no local estão atualmente em preview. A restauração in-loco é uma parte essencial da recuperação do data warehouse que permite restaurar o data warehouse para um estado conhecido anterior confiável, substituindo o data warehouse existente a partir do qual o ponto de restauração foi criado.
Novembro de 2023 Suporte do TRIM T-SQL Agora você pode usar o comando TRIM para remover espaços ou caracteres específicos de cadeias de caracteres usando as palavras-chave LEADING, TRAILING ou BOTH em TRIM (Transact-SQL).
novembrod e 2023 Suporte ao T-SQL GENERATE_SERIES Gera uma série de números em um determinado intervalo com GENERATE_SERIES (Transact-SQL). O intervalo e a etapa entre os valores da série são definidos pelo usuário.
novembrod e 2023 Cache de metadados do disco SSD Agora, os metadados de arquivos e grupos de linhas também são armazenados em cache na memória e em cache no SSD, melhorando ainda mais o desempenho.
novembrod e 2023 Melhorias no PARSER 2.0 para ingerir CSV O analisador de arquivos CSV versão 2.0 para COPY INTO cria uma inovação do grupo Plataforma de Dados e Análise da Microsoft Research para tornar a ingestão de dados de arquivos CSV extremamente rápida no Fabric Warehouse. Para obter mais informações, confira COPY INTO (Transact-SQL).
novembrod e 2023 Atribuição de recursos de computação rápida habilitada Todas as execuções de consultas no Fabric Warehouse agora são da plataforma da nova tecnologia recentemente implantada como parte do componente de Governança Global de Recursos que atribui recursos de computação em milissegundos.
novembrod e 2023 Suporte da API REST para o Warehouse Com as APIs públicas do Warehouse, os desenvolvedores de SQL agora podem automatizar seus pipelines e estabelecer a CI/CD de forma conveniente e eficiente. As APIs públicas REST do Warehouse facilitam o gerenciamento e a manipulação dos itens do Fabric Warehouse pelos usuários.
novembrod e 2023 SQLPackage com suporte para o Fabric Warehouse O SQLPackage agora dá suporte para o Fabric Warehouse. O SqlPackage é um utilitário de linha de comando que automatiza as seguintes tarefas de desenvolvimento de banco de dados, expondo algumas das APIs públicas do Estrutura do Aplicativo da Camada de Dados (DacFx). A ferramenta linha de comando SqlPackage permite que você especifique essas ações com propriedades e parâmetros específicos da ação.
Novembro de 2023 Modelos semânticos do Power BI A Microsoft renomeou o tipo de conteúdo do conjunto de dados do Power BI para modelo semântico. Isso também se aplica aos modelos semânticos do Microsoft Fabric. Para obter mais informações, confira Novo nome para os conjuntos de dados do Power BI.
Novembro de 2023 Ponto de extremidade de análise do SQL A Microsoft renomeou o ponto de extremidade SQL de um Lakehouse como o ponto de extremidade de análise SQL de um Lakehouse.
Novembro de 2023 Mascaramento de dados dinâmicos DDM (Máscara Dinâmica de Dados) para o Fabric Warehouse e o ponto de extremidade de análise do SQL no Lakehouse. Para obter mais informações e exemplos, confira Máscara Dinâmica de Dados no Fabric Data Warehouse e Como implementar a máscara dinâmica de dados no Synapse Data Warehouse.
Novembro de 2023 Clonar tabelas com viagem no tempo Agora você pode usar clones de tabela para criar um clone de uma tabela com base em dados de até sete dias de calendário no passado.
Novembro de 2023 Atualizações da experiência do usuário Chegaram várias experiências do usuário no Warehouse. Para obter mais informações, consulte atualizações de experiência do usuário do Fabric Warehouse.
Novembro de 2023 Compactação automática de dados A compactação automática de dados regenera muitos arquivos de parquet menores em alguns arquivos parquet maiores, o que melhorará o desempenho da leitura da tabela. A Compactação de Dados é uma das maneiras pelas quais ajudamos seu Warehouse a fornecer a você um ótimo desempenho sem nenhum esforço de sua parte.

Exemplos e diretrizes do Data Warehouse do Synapse

Mês Recurso Saiba mais
Abril de 2024 O Fabric muda o panorama: espelhamento do Banco de Dados SQL do Azure no Microsoft Fabric Um guia passo a passo para espelhar seu Banco de Dados SQL do Azure no Microsoft Fabric.
Fevereiro de 2024 Mapeando pools de SQL dedicados do Azure Synapse para computação de data warehouse do Fabric Leia para obter orientação sobre o mapeamento de Unidades de Data Warehouse (DWU) do pool SQL dedicado do Azure Synapse Analytics para um número equivalente aproximado de Unidades de Capacidade de Malha (CU).
Janeiro de 2024 Automatizar consultas e comandos de data warehouse do Fabric com o Data Factory No Data Factory do Fabric, há muitas maneiras de consultar e recuperar dados, além de executar comandos do warehouse usando atividades de pipeline que podem ser facilmente automatizadas.
novembrod e 2023 Migrar de pools dedicados de SQL do Azure Synapse Um guia detalhado com um runbook de migração está disponível para migrações dos pools de SQL dedicados do Data Warehouse do Azure Synapse para o Microsoft Fabric.

Análise em Tempo Real do Synapse no Microsoft Fabric

Esta seção resume os aprimoramentos e recursos recentes do Data Warehousing no Microsoft Fabric.

Mês Recurso Saiba mais
Abril de 2024 Visualização do consumo do Kusto Cache A versão prévia do consumo do Kusto Cache significa que você começará a ver o consumo faturável do medidor de dados armazenados em cache do OneLake do banco de dados KQL e de itens do Eventhouse. Para obter mais informações, consulte Consumo do banco de dados KQL.
Abril de 2024 Pausar e retomar a versão prévia do Eventstream O recurso Pausar e Retomar permite pausar o fluxo de dados de várias origens e destinos no Eventstream. Em seguida, você pode retomar o fluxo de dados tranquilamente a partir do tempo em que pausou ou de um tempo personalizado, garantindo que não haja perda de dados.
Março de 2024 O Fabric Real-Time Analytics se integra ao recém-anunciado Database Watcher para SQL do Azure Os usuários do SQL do Azure podem usar a solução de monitoramento do Observador de Banco de Dados com o Microsoft Fabric. O Database Watcher para SQL do Azure (preview) fornece recursos avançados de monitoramento e pode se integrar ao banco de dados KQL do Eventhouse.
Março de 2024 Atualizar registros em um banco de dados KQL (preview) O comando .update agora está disponível como uma visão prévia do recurso. Saiba mais sobre como atualizar registros em um banco de dados Kusto.
Março de 2024 Consultar dados do Azure Data Explorer no Queryset A conexão e o uso de dados no cluster do Azure Data Explorer do Queryset KQL do Fabric já estão disponíveis.
Fevereiro de 2024 Visão geral do Eventhouse: manipulando dados em tempo real com o Microsoft Fabric O Eventhouse (versão prévia) é um espaço de trabalho dinâmico que hospeda vários bancos de dados KQL, parte da Análise em Tempo Real do Fabric. Um Eventhouse oferece uma solução robusta para gerenciar e analisar volumes substanciais de dados em tempo real. Comece com um guia para Criar e gerenciar um Eventhouse.
Fevereiro de 2024 O atalho KQL BD para tabelas Delta Lake oferece suporte ao mapeamento de colunas baseado em nome O KQL BD agora suporta a leitura de tabelas Delta com mapeamentos de nome de coluna. O recurso de mapeamento de colunas permite que as colunas da tabela Delta e as colunas do arquivo Parquet subjacentes usem nomes diferentes. Isso permite operações de evolução de esquema Delta como em uma tabela Delta sem a necessidade de reescrever os arquivos Parquet subjacentes e permite que os usuários nomeiem colunas de tabela Delta usando caracteres que não são permitidos pelo Parquet.
Fevereiro de 2024 O atalho do KQL BD para tabelas Delta Lake suporta vetores de exclusão O BD KQL agora pode ler tabelas delta com vetores de exclusão, resolvendo o estado atual da tabela aplicando as exclusões anotadas pelos vetores de exclusão à versão mais recente da tabela.
Fevereiro de 2024 Obter dados no KQL BD agora suporta o processamento de eventos antes da ingestão via Eventstream A opção Processar evento antes da ingestão no Eventstream permite processar os dados antes de serem ingeridos na tabela de destino. Ao selecionar essa opção, o processo de obtenção de dados continua sem interrupções no Eventstream. A tabela de destino e os detalhes da fonte de dados são preenchidos automaticamente.
Fevereiro de 2024 KQL BD agora suporta a ingestão de dados usando Apache Flink Usando o conector Flink de código aberto, você pode enviar dados do Flink para sua tabela. Usando o Azure Data Explorer e o Apache Flink, você pode criar aplicativos rápidos e escalonáveis direcionados a cenários baseados em dados.
Fevereiro de 2024 Encaminhe dados do Splunk Universal Forwarder para o KQL BD usando o Kusto Splunk Universal Connector Agora você pode usar o Kusto Splunk Universal Connector para enviar dados do Splunk Universal Forwarder para uma tabela em seu KQL BD.
Dezembro de 2023 Calcular contagens distintas no Power BI executando relatórios em bancos de dados KQL As novas funções dcount e dcountif do banco de dados KQL do Fabric usam um algoritmo especial para retornar uma estimativa de contagens distintas, mesmo em conjuntos de dados extremamente grandes. As novas funções count_distinct e count_distinctif calculam contagens distintas com exatidão.
Dezembro de 2023 Crie um Notebook com conexão pré-configurada ao seu banco de dados KQL Agora você pode simplesmente criar um novo Notebook a partir do editor do banco de dados KQL com uma conexão pré-configurada com seu banco de dados KQL e explorar os dados usando o PySpark. Essa opção cria um Notebook do PySpark com uma célula de código pronta para execução, para ler dados do banco de dados KQL selecionado.
Dezembro de 2023 Validação de esquema do banco de dados KQL O novo comando .show database schema violations do Kusto foi projetado para validar o estado atual do esquema do banco de dados e encontrar inconsistências. Você pode usar violações de esquema de banco de dados .show para uma verificação pontual em seu banco de dados ou na automação de CI/CD.
Dezembro de 2023 Habilitar a disponibilidade de dados do banco de dados KQL no OneLake Com a disponibilidade de dados do banco de dados KQL no OneLake, você pode desfrutar do melhor dos dois mundos. Você pode consultar os dados com alto desempenho e baixa latência no banco de dados KQL e os mesmos dados no Delta Parquet por meio do modo Direct Lake do Power BI, Warehouse, Lakehouse, Notebooks e muito mais.
Dezembro de 2023 O Fabric vira o jogo: Análise em Tempo Real A Análise em Tempo Real é uma ferramenta formidável, que diminui a complexidade e agiliza os processos de integração de dados. O Microsoft Fabric permite que você crie análises de streaming em tempo real com o eventstream ou o Spark Stream.
novembrod e 2023 Comunicado sobre o suporte do Delta Lake no Banco de Dados KQL da Análise em Tempo Real Agora é possível habilitar a disponibilidade do Banco de Dados KQL no formato Delta Lake. O Delta Lake é o formato de tabela unificado do data lake escolhido para obter acesso contínuo aos dados em todos os mecanismos de computação no Microsoft Fabric.
novembrod e 2023 Análise em Tempo Real na GA (disponibilidade geral) do Microsoft Fabric Anunciando a disponibilidade geral da Análise em Tempo Real no Microsoft Fabric! A Análise em Tempo Real oferece inúmeros recursos que visam tornar sua análise de dados mais eficiente e eficaz.
novembrod e 2023 Suporte ao Delta Parquet no banco de dados KQL Como parte da promessa de uma cópia lógica, temos o prazer de anunciar que os dados do banco de dados KQL agora podem ser disponibilizados no OneLake no formato delta parquet. Agora é possível acessar essa tabela Delta com a criação de um atalho do OneLake a partir do Lakehouse, Warehouse ou diretamente pelo modo Direct Lake do Power BI.
novembrod e 2023 Conectores de código aberto para o banco de dados KQL Vários conectores de código aberto para análise em tempo real agora têm suporte para permitir que os usuários ingiram dados de várias fontes e os processem usando o BD KQL.
novembrod e 2023 Suporte da API REST para Banco de Dados KQL Temos o prazer de anunciar o lançamento das APIs públicas REST para o BD KQL. As APIs REST públicas do BD KQL permitem que os usuários gerenciem e automatizem seus fluxos de forma programática.
novembrod e 2023 O Eventstream agora está em disponibilidade geral O Eventstream está agora em disponibilidade geral, adicionando aprimoramentos que visam levar sua experiência de processamento de dados para o próximo nível.
novembrod e 2023 Transformação de Dados do Eventstream para o banco de dados KQL Agora, você pode transformar seus fluxos de dados em tempo real dentro do Eventstream antes que eles sejam enviados ao seu banco de dados KQL. Quando você cria um destino de Banco de Dados KQL no fluxo de eventos, pode definir o modo de ingestão como "Processamento de eventos antes da ingestão" e adicionar logicas de processamento de eventos, como filtragem e agregação, para transformar seus fluxos de dados.
novembrod e 2023 Versão prévia do complemento do Splunk O complemento Microsoft Fabric para Splunk permite que os usuários ingiram logs da plataforma Splunk em um BD KQL do Microsoft Fabric usando o SDK do Python Kusto.
novembrod e 2023 Obter dados do Eventstream em qualquer lugar no Fabric Se estiver trabalhando em outros itens do Fabric e quiser ingerir dados do Eventstream, nosso novo recurso "Obter Dados do Eventstream" simplifica o processo; você pode Obter dados do Eventstream enquanto trabalha com um banco de dados KQL e o Lakehouse.
novembrod e 2023 Dois modos de ingerir o Destino do Lakehouse Apresentamos dois modos distintos de ingestão para seu Destino do Lakehouse: linhas por arquivo e Duração.
novembrod e 2023 Otimizar as tabelas antes de ingerir dados no Lakehouse O atalho de otimização de tabela agora está disponível no destino do Eventstream Lakehouse para compactar vários arquivos pequenos de streaming gerados em uma tabela do Lakehouse. O atalho de otimização de tabela funciona abrindo um notebook com o trabalho do Spark que compactaria pequenos arquivos de streaming na tabela do Lakehouse de destino.
novembrod e 2023 Criar uma conexão com a nuvem no Eventstream Simplificamos o processo de estabelecimento de conexões de nuvem com seus serviços do Azure no Eventstream. Ao adicionar um recurso do Azure, como o Hub IoT do Azure e os Hubs de Eventos do Azure, ao seu Eventstream, agora é possível criar a conexão do Azure com a nuvem e inserir as credenciais do recurso do Azure diretamente no Eventstream. Esse aprimoramento melhora significativamente o processo de adicionar novas fontes de dados ao seu Eventstream, economizando tempo e esforço.
novembrod e 2023 Obter Dados em Análise em Tempo Real: uma experiência nova e aprimorada A nova experiência Obter Dados simplifica o processo de ingestão de dados no seu banco de dados KQL.

Exemplos e diretrizes da Análise em Tempo Real do Synapse

Mês Recurso Saiba mais
Março de 2024 Procurar recursos do Azure com Obter Dados Saiba como procurar e conectar a todos os recursos do Azure com a funcionalidade 'procurar Azure' em Obter Dados. Você pode procurar recursos do Azure e conectar facilmente aos recursos do Synapse, do armazenamento de blob ou do ADLS Gen2.
novembrod e 2023 Link semântico: validação de dados usando Great Expectations A Great Expectations Open Source (GX OSS) é uma biblioteca do Python popular que fornece uma estrutura para descrever e validar o estado aceitável dos dados. Agora, após a recente integração do vínculo semântico do Microsoft Fabric, a GX pode acessar modelos semânticos, permitindo ainda mais a colaboração contínua entre cientistas de dados e analistas de negócios.
novembrod e 2023 Explorar a transformação de dados no Eventstream para integração de Banco de Dados KQL Aprofunde-se em um cenário prático usando dados de compartilhamento de bicicletas do mundo real e aprenda a calcular o número de bicicletas alugadas a cada minuto em cada rua, usando o poderoso processador de eventos da Eventstream, dominando transformações de dados em tempo real e direcionando sem esforço os dados processados para seu Banco de Dados KQL.

Principais recursos do Microsoft Fabric

Notícias e anúncios de funcionalidades essenciais à experiência do Microsoft Fabric.

Mês Recurso Saiba mais
Março de 2024 O Microsoft Fabric agora é compatível com HIPAA Temos o prazer de anunciar que o Microsoft Fabric, nossa solução de análise tudo em um para empresas, obteve novas certificações para HIPAA e ISO 27017, ISO 27018, ISO 27001, ISO 27701.
Março de 2024 Pasta no espaço de trabalho (preview) Como uma unidade organizacional no espaço de trabalho, a pasta aborda esse problema encontrado fornecendo uma estrutura hierárquica para organizar e gerenciar seus itens. Para obter mais informações, confira Criar pastas em espaços de trabalho (preview).
Março de 2024 Preços do Copilot no Fabric: um exemplo completo O Copilot no Fabric iniciará a cobrança em 1.º de março de 2024 como parte da sua capacidade atual do Power BI Premium ou Fabric. Saiba como o uso do Copilot no Fabric é calculado.
Março de 2024 Atualizações da plataforma de capacidade para pausa/retomada, métricas de capacidade, itens virtualizados e espaços de trabalho para o Copilot e Gateways VNet A plataforma de capacidade do Fabric agora é compatível com relatórios de uso para pausa/retomada, itens virtualizados e espaços de trabalho dando suporte ao Copilot, às métricas de capacidade e ao Gateway VNet. Para obter mais informações, leia Capacity Platform Updates for Pause Resume and Capacity Metrics for Copilot and VNET Gateways.
Fevereiro de 2024 Pontos de extremidade privados gerenciados para o Microsoft Fabric (preview) Os pontos de extremidade privados gerenciados para o Microsoft Fabric (preview) permitem conexões seguras a fontes de dados que estão atrás de um firewall ou que não podem ser acessadas pela Internet pública. Os espaços de trabalho com pontos de extremidade privados gerenciados têm isolamento de rede por meio de uma rede virtual gerenciada criada pelo Microsoft Fabric. Para obter mais informações, consulte Introdução a pontos de extremidade privados gerenciados para o Microsoft Fabric em preview.
Fevereiro de 2024 Suporte de Link Privado do Azure para Microsoft Fabric (versão prévia) O Azure Private Link para Microsoft Fabric protege o acesso aos seus dados confidenciais no Microsoft Fabric fornecendo isolamento de rede e aplicando os controles necessários ao tráfego de rede de entrada. Para obter mais informações, confira Announcing Azure Private Link Support for Microsoft Fabric in Preview.
Fevereiro de 2024 Domínios no OneLake (visualização) Os domínios no OneLake ajudam você a organizar seus dados em uma malha lógica de dados, permitindo a governança federada e otimizando para as necessidades dos negócios. Agora você pode criar subdomínios, domínios padrão para usuários e mover espaços de trabalho entre domínios. Para obter mais informações, confira Domínios do Fabric.
Fevereiro de 2024 Barra de navegação do Fabric personalizável Agora você pode personalizar seus pontos de entrada preferidos na barra de navegação, incluindo fixar pontos de entrada comuns e desafixar opções raramente usadas.
Fevereiro de 2024 Filtros persistentes no espaço de trabalho Agora você pode salvar filtros selecionados no modo de exibição de lista do espaço de trabalho e eles serão aplicados automaticamente na próxima vez que você abrir o espaço de trabalho.
Dezembro de 2023 Pré-visualização das APIs de Administração do Microsoft Fabric As APIs de administração do Fabric são projetadas para simplificar as tarefas administrativas. O conjunto inicial de APIs de Administração do Fabric é adaptado para simplificar a descoberta de espaços de trabalho, itens do Fabric e detalhes de acesso do usuário.
Dezembro de 2023 Alterações de retenção de espaço de trabalho no Fabric e no Power BI O período de retenção para espaços de trabalho colaborativos é configurável de 7 a 90 dias. A configuração de retenção do espaço de trabalho é habilitada por padrão e o período de retenção padrão será de sete dias.
Novembro de 2023 As cargas de trabalho do Fabric estão agora em disponibilidade geral! O Microsoft Fabric está agora em disponibilidade geral! O Synapse Data Warehouse do Microsoft Fabric, a Engenharia de Dados e Ciência de Dados, a Análise em Tempo Real, o Data Factory, o OneLake e a plataforma Fabric estão com disponibilidade geral.
novembrod e 2023 Prévia das APIs de Usuário do Microsoft Fabric Temos o prazer de anunciar a versão prévia das APIs de Usuário do Microsoft Fabric. As APIs de usuário do Fabric são um grande facilitador para que empresas e parceiros usem o Microsoft Fabric, pois permitem a interação totalmente automatizada de ponta a ponta com o serviço, possibilitam a integração do Microsoft Fabric em aplicativos Web externos e, em geral, habilitam os clientes e os parceiros a e suas soluções com mais facilidade.

Integração contínua e entrega contínua (CI/CD) no Microsoft Fabric

Esta seção inclui diretrizes e atualizações de documentação do processo de desenvolvimento, das ferramentas e do controle do código-fonte no espaço de trabalho do Microsoft Fabric.

Mês Recurso Saiba mais
Abril de 2024 Introdução ao acesso confiável a espaço de trabalho em pipelines de dados do Fabric Crie pipelines de dados no Fabric para acessar suas contas de armazenamento ADLS Gen2 habilitadas para firewall com facilidade e segurança. Esse recurso aproveita a identidade do espaço de trabalho para estabelecer uma conexão segura e ininterrupta entre o Fabric e suas contas de armazenamento.
Março de 2024 Preview de CI/CD para pipelines de dados do Fabric A integração do Git e a integração de pipelines de implantação incorporados com pipelines de dados do Data Factory estão agora em preview. Para obter mais informações, confira Data Factory Adds CI/CD to Fabric Data Pipelines.
Março de 2024 Atualizações de arquivos do sistema para integração com o Git Os arquivos do sistema item.metadata.json e item.config.json gerados automaticamente foram consolidados em um único arquivo do sistema .platform. Para obter mais informações, confira Arquivos de sistema geradas automaticamente.
Fevereiro de 2024 APIs REST para integração com o Fabric Git As APIs REST para integração do Fabric Git permitem a incorporação perfeita da integração do Fabric Git no pipeline de CI/CD de ponta a ponta da sua equipe, eliminando a necessidade de acionamento manual de ações do Fabric.
Fevereiro de 2024 Delegação para configurações de integração do Git Para permitir mais controle sobre as configurações relacionadas ao Git, um administrador de locatários agora pode delegar essas configurações a administradores de capacidade e administradores de espaço de trabalho por meio do O que é o portal de administração?
novembrod e 2023 APIs de usuário do Microsoft Fabric As APIs de usuário do Microsoft Fabric agora estão disponíveis. As APIs de usuário do Fabric são um grande facilitador para que empresas e parceiros usem o Microsoft Fabric, pois permitem a interação totalmente automatizada de ponta a ponta com o serviço, possibilitam a integração do Microsoft Fabric em aplicativos Web externos e, em geral, habilitam os clientes e os parceiros a e suas soluções com mais facilidade.
novembrod e 2023 Notebook na Versão Prévia do Pipeline de Implantação Agora você também pode usar notebooks para implantar seu código em diferentes ambientes, como desenvolvimento, teste e produção. Você também pode usar regras de implantação para personalizar o comportamento dos notebooks quando eles são implantados, como alterar o Lakehouse padrão de um Notebook. Comece com pipelines de implantação e o Notebook aparecerá automaticamente no conteúdo de implantação.
novembrod e 2023 Versão prévia da integração do Git com o notebook Os notebooks do Fabric agora oferecem integração com o Git para controle do código-fonte usando o Azure DevOps. Ele permite aos usuários controlar as versões do código do notebook com facilidade, bem como gerenciar os Git branches aproveitando as funções do Fabric Git e do Azure DevOps.
Novembro de 2023 Versão prévia da API REST do notebook Com as APIs Públicas REST para os itens do Notebook, os engenheiros de dados/cientistas de dados podem automatizar seus pipelines e estabelecer a CI/CD de forma conveniente e eficiente. A API Pública Restful do notebook pode facilitar aos usuários gerenciar e manipular itens do notebook do Fabric e integrar o notebook a outras ferramentas e sistemas.
novembrod e 2023 Suporte do Lakehouse para pipelines de implantação e integração do Git (versão prévia) O item do Lakehouse agora se integra às capacidades de gerenciamento do ciclo de vida no Microsoft Fabric, fornecendo uma colaboração padronizada entre todos os membros da equipe de desenvolvimento durante toda a vida útil do produto. O gerenciamento do ciclo de vida facilita um processo eficaz de versão e lançamento do produto, fornecendo continuamente recursos e correções de bugs em vários ambientes.
novembrod e 2023 SQLPackage com suporte para o Fabric Warehouse O SQLPackage agora dá suporte para o Fabric Warehouse. O SqlPackage é um utilitário de linha de comando que automatiza as seguintes tarefas de desenvolvimento de banco de dados, expondo algumas das APIs públicas do Estrutura do Aplicativo da Camada de Dados (DacFx). A ferramenta linha de comando SqlPackage permite que você especifique essas ações com propriedades e parâmetros específicos da ação.

Integração contínua e entrega contínua (CI/CD) (exemplos)

Mês Recurso Saiba mais
Março de 2024 Gerenciamento do ciclo de vida do Microsoft Fabric – Introdução aos pipelines de integração e implantação do Git Aprenda os fundamentos do gerenciamento do ciclo de vida por meio de um cenário de demonstração e explore o que é o gerenciamento do ciclo de vida e o que ele significa no Fabric.

Data Activator no Microsoft Fabric

O Data Activator é uma experiência sem código no Microsoft Fabric para executar ações automaticamente quando padrões ou condições são detectados na alteração de dados. Esta seção resume os novos recursos e funcionalidades recentes do Data Activator no Microsoft Fabric.

Mês Recurso Saiba mais
Março de 2024 Novas expressões "Changes by", "Increases by" e "Decreases by" Ao definir condições em um gatilho, adicionamos sintaxe para permitir que você detecte quando houve uma alteração em seus dados por número absoluto ou porcentagem. Confira Novas expressões "Changes by", "Increases by" e "Decreases by".

Fabric e Microsoft 365

Esta seção inclui artigos e comunicados sobre a integração do Microsoft Fabric com o Microsoft Graph e o Microsoft 365.

Mês Recurso Saiba mais
Março de 2024 Analisar tabelas do Dataverse do Microsoft Fabric Ao criar um atalho no Fabric, agora você verá uma opção para o Dataverse. Ao escolher esse tipo de atalho e especificar os detalhes do ambiente do Dataverse, você pode ver e trabalhar rapidamente com as tabelas desse ambiente.
novembrod e 2023 Fabric + dados do Microsoft 365: melhores juntos O Microsoft Graph é o gateway para dados e inteligência em Microsoft 365. A Integração de Dados do Microsoft 365 para Microsoft Fabric permite que você gerencie seu Microsoft 365 junto com suas outras fontes de dados em um só lugar com um conjunto de experiências analíticas.
novembrod e 2023 O conector do Microsoft 365 agora dá suporte à ingestão de dados no seu Lakehouse (versão prévia) O conector do Microsoft 365 agora dá suporte à ingestão de dados nas tabelas do Lakehouse.

Migração

Esta seção inclui diretrizes e atualizações de documentação sobre migração do Microsoft Fabric.

Mês Recurso Saiba mais
Fevereiro de 2024 Mapeando pools de SQL dedicados do Azure Synapse para computação de data warehouse do Fabric Leia para obter orientação sobre o mapeamento de Unidades de Data Warehouse (DWU) do pool SQL dedicado do Azure Synapse Analytics para um número equivalente aproximado de Unidades de Capacidade de Malha (CU).
novembrod e 2023 Migrar de pools dedicados de SQL do Azure Synapse Um guia detalhado com um runbook de migração está disponível para migrações dos pools de SQL dedicados do Data Warehouse do Azure Synapse para o Microsoft Fabric.
novembrod e 2023 Migrando do Azure Synapse Spark para o Fabric Um conjunto detalhado de artigos sobre a migração do Spark do Azure Synapse para o Microsoft Fabric, incluindo um processo de migração que pode envolver vários cenários e fases.

Monitorar

Esta seção inclui diretrizes e atualizações de documentação sobre como monitorar a capacidade e o uso do Microsoft Fabric, incluindo o Hub de monitoramento.

Mês Recurso Saiba mais
Março de 2024 Compatibilidade com métricas de capacidade para Pausar e Retomar As métricas de capacidade do Fabric foram atualizadas com novos eventos do sistema e lógica de reconciliação para simplificar a análise de capacidades pausadas. O Fabric Pause and Resume é um recurso de gerenciamento de capacidade que permite pausar as capacidades de SKU F para gerenciar custos. Quando sua capacidade não estiver operacional, você poderá pausá-la para permitir a redução de custos e, mais tarde, quando quiser retomar o trabalho em sua capacidade, poderá reativá-la.

Microsoft Purview

Esta seção resume os comunicados recentes sobre recursos de governança e conformidade com o Microsoft Purview no Microsoft Fabric. Saiba mais sobre a Proteção de informações no Microsoft Fabric.

Mês Recurso Saiba mais
Maio de 2023 Administração, Segurança e Governança no Microsoft Fabric O Microsoft Fabric fornece funcionalidades internas de governança e conformidade de nível empresarial, da plataforma Microsoft Purview.

Arquivo

Para atualizações mais antigas, consulte atualizações anteriores no Microsoft Fabric.

Conteúdo relacionado