Обзор архитектур
Прежде чем приступить к созданию архитектуры данных платформы облачной аналитики, ознакомьтесь со статьями в следующей таблице.
| Section | Описание |
|---|---|
| Создание начальной стратегии | Как создать стратегию работы с данными и стать организацией, управляемой данными. |
| Определение плана | Как разработать план для аналитики в масштабе облака. |
| Подготовка аналитического пространства | Обзор управления данными и целевых зон данных с ключевыми вопросами проектирования, такими как регистрация предприятия, сеть, управление удостоверениями и доступом, политики, непрерывность бизнес-процессов и аварийное восстановление. |
| Управление аналитикой | Требования к управлению данными, каталогом данных, происхождением, master управлением данными, качеством данных, соглашениями об общем доступе к данным и метаданными. |
| Защита аналитического пространства | Как защитить ресурсы аналитики с помощью проверки подлинности и авторизации, конфиденциальности данных и управления доступом к данным. |
| Организация людей и команд | Организация эффективных операций, ролей, команд и командных функций. |
| Управление аналитическим пространством | Как подготовить платформу и наблюдаемость для сценария. |
Физическая архитектура
Физическая реализация аналитики облачного масштаба состоит из двух main архитектур: целевой зоны управления данными и целевой зоны данных.
Приложения для работы с данными
Приложения данных являются основной концепцией для доставки продукта данных и могут быть согласованы с шаблонами lakehouse и сетки данных.
аналитику в масштабах облака;
Вы можете масштабировать развертывание аналитики облачного масштаба, используя несколько целевых зон данных.
Сетка данных
Реализуйте сетку данных с помощью аналитики облачного масштаба. Хотя применяется большинство рекомендаций по аналитике в масштабе облака, существуют некоторые различия, о которых следует помнить в отношении доменов данных, платформ самообслуживания, адаптации продуктов для работы с данными, системы управления, платформы данных и общего доступа к данным.
Шаблоны развертывания для аналитики в масштабе облака
В следующей таблице перечислены эталонные шаблоны, которые можно развернуть.
| Хранилище | Содержимое | Обязательно | Модель развертывания |
|---|---|---|---|
| Шаблон управления данными | Центральные службы управления данными и общие службы данных, такие как каталог данных и локальная среда выполнения интеграции | Да | По одному на аналитику в масштабе облака |
| Шаблон целевой зоны данных | Общие службы целевой зоны данных, включая прием, управление и хранение данных | Да | По одному на каждую целевую зону данных |
| Шаблон интеграции данных — пакетная обработка | Дополнительные службы, необходимые для пакетной обработки данных | Нет | По одному или несколько на каждую целевую зону данных |
| Шаблон интеграции данных — потоковая обработка | Дополнительные службы, необходимые для обработки потока данных | Нет | По одному или несколько на каждую целевую зону данных |
| Шаблон продукта данных — аналитика, обработка и анализ данных | Дополнительные службы, необходимые для аналитики данных и искусственного интеллекта | Нет | По одному или несколько на каждую целевую зону данных |
Эти шаблоны содержат шаблоны Azure Resource Manager, файлы параметров шаблонов и определения конвейера CI/CD для развертывания ресурсов.
Шаблоны могут меняться со временем из-за новых служб и требований Azure. Защитите ветвь main каждого репозитория, чтобы она оставалась без ошибок и готова к использованию и развертыванию. Используйте подписку на разработку, чтобы протестировать изменения конфигурации шаблона перед слиянием усовершенствований функций обратно в ветвь main.
Частное подключение к средам
Исходная архитектура защищена при проектировании. Он использует многоуровневый подход к безопасности для преодоления распространенных рисков кражи данных.
Наиболее простым решением безопасности является размещение jumpbox в виртуальной сети целевой зоны управления данными или целевой зоны данных для подключения к службам данных через частные конечные точки.
Часто задаваемые вопросы
Список вопросов и ответов о аналитике в масштабе облака см. в статье Часто задаваемые вопросы.