Visão geral do Mapa de Dados do Microsoft Purview

O Mapa de Dados do Microsoft Purview é a base para a descoberta e governança de dados no Microsoft Purview. Ele captura metadados sobre dados em análise, software como serviço (SaaS) e sistemas operacionais em ambientes híbridos, locais e multinuvem. A digitalização e classificação integradas mantêm o Mapa de Dados atualizado.

Essa visão geral ajuda os administradores do Microsoft Purview a planejar a capacidade e monitorar o uso e os custos do Mapa de Dados. Cada conta do Microsoft Purview tem um Mapa de Dados que começa em uma unidade de capacidade e pode ser dimensionado com base na carga de solicitação e na quantidade de metadados armazenados.

Capacidade e dimensionamento automático

O Mapa de Dados tem dois componentes de capacidade: armazenamento de metadados e taxa de transferência de operação. Uma unidade de capacidade () representa ambos os componentes. Por padrão, uma conta do Microsoft Purview começa com uma unidade de capacidade e é dimensionada com base no uso até um máximo de 10 unidades de capacidade. Cada unidade de capacidade inclui taxa de transferência de 25 operações por segundo e 10 GB de armazenamento de metadados.

O Mapa de Dados inclui os seguintes recursos:

  • Mapa de dados elástico com dimensionamento automático: comece com uma unidade de capacidade e dimensione automaticamente com base na carga de até 10 unidades de capacidade.
  • Verificação e ingestão aprimoradas: rastreie e controle como a verificação e a ingestão preenchem ativos de dados, classificações e linhagem. Essa funcionalidade afeta os preços.

Taxa de transferência de operação

As operações medem a taxa de transferência do Mapa de Dados do Microsoft Purview. Elas incluem operações de criação, leitura, gravação, atualização e exclusão em metadados armazenados no Mapa de Dados. Os exemplos incluem:

  • Criando um ativo no Mapa de Dados.
  • Adicionando um relacionamento a um ativo, como um proprietário, administrador, pai ou linhagem.
  • Editar um ativo para adicionar metadados de negócios, como uma descrição ou um termo do glossário.
  • Executando uma pesquisa de palavra-chave que retorna resultados para a página de resultados da pesquisa.

Armazenamento de metadados

O armazenamento inclui metadados técnicos, de negócios, operacionais e semânticos.

Os metadados técnicos incluem esquemas, tipos de dados e colunas descobertos por meio da verificação do Microsoft Purview. Os metadados de negócios incluem metadados automatizados, como metadados promovidos de conjuntos de dados do Microsoft Power BI ou descrições de tabelas SQL e descrições e termos de glossário adicionados manualmente. Os metadados semânticos incluem mapeamentos de coleção para fontes de dados ou classificações. Os metadados operacionais incluem dados

Cenário de exemplo

Claudia é uma administradora do Microsoft Azure na Contoso que deseja criar uma conta do Microsoft Purview no portal do Azure. Ela não sabe o tamanho do Mapa de Dados que o estado futuro da plataforma exige. No entanto, ela sabe que o faturamento do Mapa de Dados usa unidades de capacidade e é afetado pela taxa de transferência de armazenamento e operações. Ela quer começar com o menor mapa de dados para manter os custos baixos e aumentá-los elasticamente com base no consumo.

Claudia pode criar uma conta do Microsoft Purview com o tamanho padrão do Mapa de Dados de uma unidade de capacidade, que pode ser escalada e reduzida verticalmente automaticamente. O dimensionamento automático também permite que a capacidade se ajuste para intermitências de dados intermitentes ou planejadas durante períodos específicos. Em seguida, Claudia define as configurações de rede e conclui a criação da conta.

Na página Métricas da conta do Microsoft Purview no portal do Azure, Claudia pode exibir o armazenamento do Mapa de Dados e o consumo de taxa de transferência de operações. Ela também pode criar um alerta para quando a taxa de transferência de armazenamento ou operações atingir um limite especificado.

Mapeamento de dados cobrança

Cobrança para contas clássicas do Microsoft Purview

Você paga por uma unidade de capacidade, que inclui 25 operações por segundo e 10 GB de armazenamento de metadados. A cobrança extra é baseada no consumo de cada unidade de capacidade extra, calculada por hora. As operações do Mapa de Dados são dimensionadas em incrementos de 25 operações por segundo e o armazenamento de metadados é dimensionado em incrementos de 10 GB. O Data Map pode escalar e reduzir verticalmente automaticamente dentro da janela de elasticidade. Você pode aumentar a janela de elasticidade somente para contas clássicas do Microsoft Purview. Para solicitar um aumento, examine os limites atuais e crie uma solicitação de suporte.

As unidades de capacidade do Data Map vêm com um limite na taxa de transferência e no armazenamento de operações. Se o armazenamento exceder a unidade de capacidade atual, você pagará pela próxima unidade de capacidade, mesmo que não use a taxa de transferência de operações. A tabela a seguir mostra os intervalos de unidades de capacidade do Mapa de Dados. Entre em contato com o suporte se a unidade de capacidade do Mapa de Dados ultrapassar 10 unidades de capacidade.

Unidade de capacidade do Mapa de Dados Taxa de transferência de operações por segundo Capacidade de armazenamento em GB
1 25 10
2 50 20
3 75 30
4 100 40
5 125 50
6 150 60
7 175 70
8 200 80
9 225 90
10 250 100

Exemplos de cobrança

  • A taxa de transferência de operação para a hora é menor ou igual a 25 operações por segundo, e o tamanho do armazenamento é de 1 GB. Você paga por uma unidade de capacidade.
  • A taxa de transferência de operação para a hora é menor ou igual a 25 operações por segundo, e o tamanho do armazenamento é de 15 GB. Você paga por duas unidades de capacidade.
  • A taxa de transferência de operação por hora é de 50 operações por segundo e o tamanho do armazenamento é de 15 GB. Você paga por duas unidades de capacidade.
  • A taxa de transferência de operação por hora é de 50 operações por segundo e o tamanho do armazenamento é de 25 GB. Você paga por três unidades de capacidade.
  • A taxa de transferência de operação por hora é de 250 operações por segundo e o tamanho do armazenamento é de 15 GB. Você paga por unidades de capacidade 10.

Exemplo detalhado de cobrança

O exemplo de cobrança do Mapa de Dados mostra o armazenamento crescente de metadados e operações variáveis por segundo em uma janela de seis horas, das 12h às 18h. A linha tracejada mostra as operações por segundo e a linha sólida mostra o armazenamento de metadados:

Gráfico de linhas mostrando as operações por segundo e o armazenamento de metadados das 12h às 18h.

Cada unidade de capacidade do Mapa de Dados dá suporte a 25 operações por segundo e 10 GB de armazenamento de metadados. O Mapa de Dados é cobrado por hora. O processo de faturamento considera as unidades de capacidade máximas do Mapa de Dados necessárias em uma hora, com no mínimo uma unidade de capacidade. Às vezes, você pode precisar de mais operações por segundo em uma hora, e mais operações aumentam o número de unidades de capacidade necessárias nessa hora. Em outros momentos, o uso de operações por segundo pode ser baixo, mas talvez você ainda precise de um grande volume de armazenamento de metadados. O armazenamento de metadados determina quantas unidades de capacidade você precisa dentro da hora.

A tabela mostra o número máximo de operações por segundo e o armazenamento de metadados usado por hora para este exemplo de cobrança:

Tabela mostrando as operações máximas por hora, o armazenamento de metadados e as horas da unidade de capacidade cobradas.

Com base nas operações por segundo e no consumo de armazenamento de metadados durante esse período, o Mapa de Dados é cobrado por 22 horas de unidade de capacidade ao longo de seis horas (1 + 3 + 4 + 5 + 6 + 3):

Gráfico de barras mostrando as horas da unidade de capacidade cobrada das 12h às 18h.

Importante

O Data Map pode escalar e reduzir verticalmente automaticamente dentro da janela de elasticidade. Para aumentar a janela de elasticidade, examine os limites atuais e crie uma solicitação de suporte.

Limites de taxa de transferência de operações

O limite da taxa de transferência padrão é de 10 unidades de capacidade. Se você estiver trabalhando com um ambiente grande do Microsoft Purview e precisar de uma taxa de transferência maior, poderá solicitar uma janela de elasticidade maior criando uma solicitação de cota. Selecione a unidade de capacidade do mapa de dados como o tipo de cota. Inclua informações relevantes sobre seu ambiente e a capacidade extra de que você precisa. Você pode aumentar a janela de elasticidade somente para contas clássicas do Microsoft Purview.

Importante

Não há limite padrão para o armazenamento de metadados. À medida que você adiciona mais metadados ao Mapa de Dados, ele aumenta elasticamente.

Ao aumentar o limite da taxa de transferência das operações, você também aumenta o número mínimo de unidades de capacidade. Por exemplo, se você aumentar o limite da taxa de transferência para 20, pagará por um mínimo de duas unidades de capacidade. A tabela a seguir mostra as possíveis opções de taxa de transferência. O número inserido na solicitação de cota é o número mínimo de unidades de capacidade na conta.

Unidades de capacidade mínima Limite da taxa de transferência de operações
1 10 (padrão)
2 20
3 30
4 40
5 50
6 60
7 70
8 80
9 90
10 100

Otimizar unidades de capacidade e taxa de transferência de operações

Use estas práticas recomendadas para otimizar o uso da unidade de capacidade e da taxa de transferência de operações:

  • Use verificações incrementais após a verificação completa inicial. As verificações incrementais processam apenas objetos alterados desde a verificação anterior e normalmente fornecem a maior redução.
  • Limite o escopo da verificação e, quando disponível, use o modo Avançado para incluir ou excluir caminhos específicos em vez de verificar toda a origem.
  • Escalonar agendamentos de verificação. Evite executar várias varreduras simultaneamente; execute-os sequencialmente e fora dos períodos de pico de uso.
  • Reduza a frequência de verificação. Por exemplo, altere as verificações de hora em hora para verificações diárias se o requisito de atualização de governança permitir.
  • Desabilite a extração de linhagem se ela não for necessária.
  • Use varreduras separadas e não sobrepostas.
  • Limpe a linhagem histórica regularmente do armazenamento do Microsoft Purview.
  • Remova manualmente dados não essenciais ou obsoletos do armazenamento do Microsoft Purview.

Monitoramento e métricas

Monitore as métricas Unidades de Capacidade do Mapa de Dados e Tamanho de Armazenamento do Mapa de Dados para entender o tamanho e o faturamento de seu patrimônio de dados.

  1. No portal do Azure, acesse contas do Microsoft Purview e selecione sua conta do Microsoft Purview.

  2. Na página Visão Geral , role até a seção Monitoramento para exibir as métricas Unidades de Capacidade do Mapa de Dados e Tamanho do Armazenamento do Mapa de Dados em diferentes períodos de tempo.

    Captura de tela de uma conta do Microsoft Purview Página de visão geral mostrando métricas de capacidade e armazenamento do Mapa de Dados.

  3. Para obter mais configurações, acesseMétricasde Monitoramento> para exibir Unidades de Capacidade do Mapa de Dados e Tamanho de Armazenamento do Mapa de Dados.

    Captura de tela das Métricas do Monitor do Azure com Unidades de Capacidade do Mapa de Dados e Tamanho de Armazenamento do Mapa de Dados disponíveis.

  4. Selecione Unidades de Capacidade de Mapa de Dados para exibir o uso da unidade de capacidade nas últimas 24 horas. Passe o mouse sobre o gráfico de linhas para visualizar as unidades de capacidade do Mapa de Dados consumidas em um momento específico.

    Captura de tela de um gráfico de Unidades de Capacidade do Mapa de Dados mostrando o uso nas últimas 24 horas.

  5. Na parte superior da página, selecione Hora Local: Últimas 24 horas (Automático - 1 hora) para alterar o intervalo de tempo exibido no gráfico.

    Captura de tela do menu de intervalo de tempo do Monitor do Azure com opções de intervalo personalizadas.

    Captura de tela de um gráfico de Unidades de Capacidade do Mapa de Dados dos últimos três dias.

  6. Selecione um tipo de gráfico para personalizar a visualização.

    Captura de tela das opções de tipo de gráfico do Azure Monitor para Unidades de Capacidade de Mapa de Dados.

  7. Selecione Novo gráfico para adicionar um gráfico Tamanho de Armazenamento do Mapa de Dados .

    Captura de tela do Azure Monitor com gráficos Tamanho de armazenamento do mapa de dados e Unidades de capacidade do mapa de dados.

Próximas etapas