Примечание.
Для доступа к этой странице требуется авторизация. Вы можете попробовать войти или изменить каталоги.
Для доступа к этой странице требуется авторизация. Вы можете попробовать изменить каталоги.
Благодаря экспоненциальному росту данных организации используют неограниченные вычислительные ресурсы, хранилище и аналитические возможности Azure для масштабирования, потока, прогнозирования и просмотра своих данных. Решения аналитики превратят объемы данных в полезные бизнес-аналитики (BI), такие как отчеты и визуализации, а также изобретательный искусственный интеллект (ИИ), такие как прогнозы на основе машинного обучения.
Независимо от того, начинает ли ваша организация оценивать облачные средства аналитики или стремится расширить текущую реализацию, Azure предоставляет множество вариантов. Рабочий процесс начинается с изучения распространенных подходов и выравнивания процессов и ролей вокруг облачного мышления.
Данные могут обрабатываться в пакетах или в режиме реального времени, на собственных серверах или в облаке, но цель любого аналитического решения — использовать данные в масштабе. Все чаще организации хотят создать единый источник истины для всех реляционных и нереляционных данных, создаваемых людьми, компьютерами и Интернетом вещей (IoT). Обычно используется архитектура больших данных или архитектура Интернета вещей для преобразования необработанных данных в структурированную форму, а затем перемещение ее в аналитическое хранилище данных. Это хранилище становится единственным истинным источником, который может поддерживать множество аналитических решений.
Architecture
Скачайте файл Visio для этой архитектуры.
На приведенной выше схеме показана обычная реализация базовой и базовой аналитики. Ознакомьтесь с архитектурами, приведенными в этом разделе, чтобы найти реальные решения, которые можно создавать в Azure.
Изучение архитектур аналитики и руководств
В статьях этого раздела представлены полностью разработанные архитектуры, которые можно развернуть в Azure и расширить до уровня решений и руководств для промышленного использования. Это поможет вам принять важные решения о том, как вы используете технологии аналитики в Azure. Идеи решения демонстрируют шаблоны реализации и возможности, которые следует учитывать при планировании разработки аналитических доказательств концепции.
Руководства по архитектуре аналитики
Варианты технологий . Эти статьи помогают оценить и выбрать лучшие технологии аналитики для ваших требований к рабочей нагрузке:
- Аналитика и отчеты — сравнение вариантов анализа данных и визуализации в Azure.
- Пакетная обработка — оценка технологий пакетной обработки для рабочих нагрузок больших данных.
- Потоковая обработка — сравнение технологий потоковой обработки для аналитики в режиме реального времени.
- Выберите аналитическое хранилище данных . Руководство по выбору правильного аналитического хранилища данных.
- Выберите аналитическое хранилище данных в Microsoft Fabric - Руководство по выбору хранилищ данных в Microsoft Fabric.
Аварийное восстановление для платформы данных Azure . В этих статьях приведены комплексные рекомендации по реализации стратегий аварийного восстановления:
- Обзор стратегий аварийного восстановления для платформ данных Azure.
- Architecture — шаблоны архитектуры для аварийного восстановления на платформах данных Azure.
- Сведения о сценарии . Подробные сценарии реализации аварийного восстановления.
- Рекомендации - Лучшие практики по аварийному восстановлению.
Архитектуры аналитики
Эти готовые к работе архитектуры демонстрируют комплексные решения аналитики, которые можно развертывать и настраивать:
- Комплексная аналитика с Microsoft Fabric — создание современной аналитической платформы с применением интегрированных функций Microsoft Fabric.
- Хранение и аналитика данных — интеграция больших объемов данных из нескольких источников в единую платформу аналитики.
- Используйте Microsoft Fabric для разработки корпоративного решения бизнес-аналитики. Разработка решения корпоративной бизнес-аналитики с помощью Microsoft Fabric.
- Обработка данных Lakehouse в режиме, близком к реальному времени — используйте Azure Synapse Analytics и Azure Data Lake Storage для обработки данных Lakehouse почти в режиме реального времени.
- Синхронизация MongoDB Atlas с Azure Synapse Analytics — синхронизация данных MongoDB Atlas с Azure Synapse Analytics в режиме реального времени.
- Потоковая обработка с помощью Azure Databricks — создание сквозного конвейера потоковой обработки с помощью Azure Databricks.
- Потоковая обработка с помощью Azure Stream Analytics — создание конвейера потоковой обработки, который обрабатывает данные, сопоставляет записи и вычисляет скользящие средние значения.
- Современное хранилище данных для малого и среднего бизнеса — создание современного решения для хранилища данных, предназначенного для малого и среднего бизнеса.
Идеи решения аналитики
Эти идеи решения демонстрируют шаблоны реализации и возможности для изучения:
- Конвейеры для Ingestion, ETL и потоковой обработки с Azure Databricks — создание ETL-конвейеров для пакетной и потоковой обработки данных с целью автоматизации интеграции в хранилище данных.
- Современная архитектура аналитики с помощью Azure Databricks — сбор, обработка, анализ и визуализация данных с помощью современной архитектуры данных.
- Современная платформа данных для малого и среднего бизнеса — создание современной архитектуры платформы данных для малого и среднего бизнеса с помощью Microsoft Fabric и Azure Databricks.
- Аналитика в режиме реального времени с помощью Azure Data Explorer — анализ данных в режиме реального времени с помощью Azure Data Explorer и служебной шины Azure.
Сведения об аналитике по Azure
Microsoft Learn предоставляет бесплатные учебные ресурсы по интернету для технологий аналитики Azure. Платформа предлагает видео, учебники и практические лаборатории для конкретных продуктов и служб, а также пути обучения, организованные по роли задания.
Следующие ресурсы предоставляют базовые знания для реализации аналитики в Azure:
- Просмотрите темы данных в Azure
- Введение в основные концепции данных Microsoft Azure
- Начните работу с Microsoft Fabric
Пути обучения по роли
- Аналитик данных: начало работы с аналитикой данных Майкрософт
- Инженер данных. Реализация решения аналитики данных с помощью Azure Databricks
- Специалист по данным: Строить решения на основе машинного обучения с помощью Azure Databricks
Готовность организации
Организации, начинающие внедрение облака, могут использовать Cloud Adoption Framework для проверенных рекомендаций, направленных на ускорение внедрения облака. Рекомендации по аналитике в масштабе облака см. в разделе "Аналитика в масштабе облака".
Чтобы обеспечить качество решения аналитики на Azure, рекомендуется следовать Azure Well-Architected Framework. В предоставляемом руководстве содержатся конкретные рекомендации для организаций, стремящихся к архитектурному совершенству, а также обсуждаются способы разработки, подготовки и мониторинга оптимизированных для затрат решений на платформе Azure.
Для рекомендаций по рабочим нагрузкам данных, согласованным с основными принципами платформы Well-Architected Framework, см. Azure Well-Architected Framework для рабочих нагрузок данных.
Путь к производству
Выбор хранилища данных — это базовое решение при реализации аналитики в Azure. Выбрав подход к хранилищу, можно определить соответствующую технологию аналитики данных для вашего сценария.
Ключевые моменты принятия решений включают:
Хранилище данных: выберите между озёрами данных, хранилищами данных или лэйкхаусами на основе структуры данных и шаблонов запросов. Рекомендации по выбору и проектированию решений баз данных, которые поддерживают аналитические рабочие нагрузки, см. в статье Архитектура баз данных.
Модель обработки: определите, соответствует ли пакетная обработка, потоковая обработка или комбинация в соответствии с требованиями рабочей нагрузки.
Средства аналитики: выберите технологии БИЗНЕС-аналитики и ИИ, которые соответствуют навыкам и бизнес-потребностям вашей команды.
Чтобы просмотреть различные стили архитектуры для решений аналитики, см. архитектуры.
Лучшие практики
Высококачественная аналитика начинается с надежных, надежных данных. На самом высоком уровне методы информационной безопасности помогают обеспечить защиту ваших данных при передаче и хранении. Доступ к этим данным также должен быть доверенным. Надежные данные подразумевают проектирование, реализующее:
Политики управления . Определение четкого владения данными, классификации и политик доступа.
Управление удостоверениями и доступом . Реализация принципов управления доступом на основе ролей и наименьших привилегий.
Средства управления безопасностью сети — защита потоков данных между службами и предотвращение несанкционированного доступа.
Защита данных — шифрование неактивных и передаваемых данных.
На уровне платформы следующие рекомендации big data best practices способствуют надежной аналитике на Azure:
Оркестрация загрузки данных — используйте конвейеры данных, например те, которые поддерживаются Azure Data Factory или Microsoft Fabric.
Обработка данных . Используйте распределенное хранилище данных, подход к большим данным, поддерживающий большие объемы данных и более широкий диапазон форматов.
Заранее удалите или замаскируйте конфиденциальные данные, чтобы избежать их хранения в озере данных в рамках рабочего процесса приема.
Рассмотрим общую стоимость - Сбалансируйте стоимость единицы вычислительных узлов с по-минутной стоимостью использования этих узлов для выполнения задания.
Создание унифицированного озера данных — объединение хранилища для файлов в нескольких форматах, будь то структурированное, полуструктурированное или неструктурированное. Используйте Azure Data Lake Storage Gen2 в качестве единственного источника истины. Например, см. архитектуру BI-решения в Центре превосходства.
Оставайтесь актуальными с помощью аналитики
Службы аналитики Azure развиваются для решения современных проблем с данными. Будьте информированы о последних обновлениях и запланированных функциях:
Получите последние обновления о продуктах и функциях Azure.
Будьте в курсе этих ключевых аналитических служб:
- Что нового в Microsoft Fabric
- Заметки о выпуске Azure Databricks
- Что нового в Azure Data Explorer
- Что нового в Power BI
Дополнительные ресурсы
Аналитика — это широкая категория и охватывает ряд решений. Следующие ресурсы помогут вам узнать больше о Azure.
Гибрид
Подавляющее большинство организаций нуждаются в гибридном подходе к аналитике, так как их данные размещаются как в локальной среде, так и в облаке. Организации часто расширяют локальные решения данных в облаке. Для подключения сред организации должны выбрать архитектуру гибридной сети.
Ключевые сценарии гибридной аналитики:
- Модернизация мейнфреймов: модернизация мейнфреймов и средних данных — интеграция устаревших источников данных с современными платформами аналитики.
- Локальная интеграция: объединенные гибридные и многооблачные операции — подключение локальных баз данных к облачной аналитике.
- Анализ на периферии: обработка данных на периферии и агрегация результатов в облаке.
аналитика в режиме реального времени
Аналитика в режиме реального времени позволяет организациям работать с данными по мере поступления. Ниже приведены некоторые ресурсы, которые помогут вам приступить к работе с аналитикой в режиме реального времени в Azure:
- Аналитика в режиме реального времени на архитектуре больших данных — обработка и анализ потоковых данных в масштабе.
- Аналитика Интернета вещей с помощью Azure Data Explorer — анализ данных телеметрии Интернета вещей в режиме реального времени.
- Потоковая обработка с помощью Azure Stream Analytics — создание бессерверных решений потоковой передачи.
- Создайте современную архитектуру аналитики с помощью Azure Databricks — аналитики корпоративного уровня с помощью Apache Spark.
Просмотрите дополнительные примеры аналитики в Центре архитектуры Azure
Специалисты по AWS или Google Cloud
Эти статьи помогут быстро освоить новые темы, сравнивая варианты аналитики Azure с другими облачными службами.