Enterprise Data Warehouse

Armazenamento de Blobs
Data Lake
Synapse Analytics

Ideias de solução

Este artigo é uma ideia de solução. Se você quiser que expandamos o conteúdo com mais informações, como possíveis casos de uso, serviços alternativos, considerações de implementação ou diretrizes de preços, informe-nos fornecendo comentários do GitHub.

Um data warehouse corporativo permite reunir todos os seus dados em qualquer escala facilmente e obter insights por meio de painéis analíticos, relatórios operacionais ou análise avançada para todos os seus usuários.

Possíveis casos de uso

Essa abordagem pode ser usada para:

  • Estabeleça um data warehouse para ser a única fonte de verdade para seus dados.
  • Integre as fontes de dados relacionais com outros conjuntos de dados não estruturados.
  • Use a modelagem semântica e as ferramentas de visualização poderosas para uma análise de dados mais simples.

Arquitetura

Diagrama de uma arquitetura de data warehouse empresarial usando Azure Synapse Analytics com Azure Data Lake Storage Gen2, Azure Analysis Services e Power BI.

Baixe um SVG dessa arquitetura.

Fluxo de dados

  1. Combine todos os seus dados estruturados, não estruturados e semiestruturados (logs, arquivos e mídia) usando Azure Synapse Analytics Pipelines para Armazenamento de Blobs do Azure.
  2. Aproveite os dados em Armazenamento de Blobs do Azure para executar análises escalonáveis com o pool do Azure Synapse Analytics Spark e obter dados limpos e transformados.
  3. Dados limpos e transformados podem ser combinados com dados estruturados existentes, criando um hub para todos os seus dados com o Azure Synapse Analytics.
  4. Crie relatórios operacionais e painéis analíticos sobre o pool de SQL dedicado para derivar insights dos dados e usar Azure Analysis Services para atender milhares de usuários finais.

Componentes

  • Azure Synapse Analytics é o data warehouse de nuvem rápido, flexível e confiável que permite dimensionar, computar e armazenar de forma elástica e independente, com uma arquitetura de processamento paralelo massivamente paralela.
  • A Documentação do Synapse Pipelines permite criar, agendar e orquestrar seus fluxos de trabalho ETL/ELT.
  • O Armazenamento de Blobs do Azure é um armazenamento de objetos escalonável massivamente para qualquer tipo de imagens de dados não estruturadas, vídeos, áudio, documentos e de maneira mais fácil e econômica.
  • Azure Synapse Pools do Spark do Analytics é uma estrutura de processamento paralela que dá suporte ao processamento na memória para aumentar o desempenho de aplicativos analíticos de Big Data.
  • Azure Analysis Services é uma análise de nível empresarial como um serviço que permite que você governe, implante, teste e entregue sua solução de BI com confiança.
  • O Power BI é um pacote de ferramentas de análise de negócios que fornece insights a toda a organização. Conecte-se a centenas de fontes de dados, simplifique a preparação dos dados e conduza análise ad hoc. Produza belos relatórios e, em seguida, publique-os para que sua organização consuma na Web e em dispositivos móveis.

Preços

Próximas etapas