Поделиться через


Архитектура Аналитика оператора Azure

Оператор Azure Аналитика — это полностью управляемая служба, которая позволяет собирать и анализировать большие объемы сетевых данных, собранных из сложных функций сети с несколькими компонентами или несколькими поставщиками. Она предоставляет статистические данные, машинное обучение и аналитику на основе ИИ для рабочих нагрузок для конкретных операторов, чтобы помочь операторам понять работоспособность своих сетей и качество взаимодействия своих подписчиков практически в реальном времени. Дополнительные сведения о проблеме Аналитика решения оператора Azure см. в общем обзоре Аналитика оператора Azure.

Оператор Azure Аналитика развертывает ресурс Продукта данных для инкапсулировать определенную категорию или пространство имен данных. Оператор Azure Аналитика позволяет архитектуре сетки данных четвертого поколения, которая предлагает федерацию времени запроса для сопоставления и запроса в нескольких продуктах данных.

На следующей схеме показана архитектура оператора Azure Аналитика продукт данных и окружающие службы, с которыми он взаимодействует.

Схема архитектуры Аналитика оператора Azure.

Оператор Azure Аналитика Продукт данных находится в собственной группе ресурсов. Он развертывает управляемую группу ресурсов, содержащую экземпляр Azure Key Vault, который предоставляет маркер подписанного URL-адреса (SAS) для хранения данных приема. Маркер SAS используется для проверки подлинности при приеме данных. Варианты приема данных включают оператор Azure Аналитика прием агентов; Такие средства Azure, как AzCopy, служба хранилища Azure Обозреватель и Фабрика данных Azure; и механизмы на основе кода. Варианты приема могут отправлять данные из таких источников данных, как продукты и службы Майкрософт, продукты, отличные от Майкрософт, и платформы. Параметры приема данных могут использовать общедоступный Интернет, ExpressRoute или Azure VPN-шлюз. Продукты данных предоставляют доступ к данным по URL-адресу потребления ADLS и URL-адресу потребления KQL. Приложения и службы, которые могут использовать данные, включают Обозреватель данных Azure (в панелях мониторинга и базе данных последователей), Microsoft Power BI, Microsoft Fabric, Студия машинного обучения Azure, Azure Databricks, Azure Logic Apps, служба хранилища Azure Обозреватель, AzCopy и приложения и службы, отличные от Майкрософт. Дополнительные функции и возможности оператора Azure Аналитика включают Azure Monitor для журналов и метрик, управляемых клиентом ключей, интеграции Purview для каталога данных, ограниченных IP-адресов или частных сетей для доступа к данным, управления доступом на основе ролей Microsoft Entra ID для использования KQL, а также хранения данных и размеров горячего кэша.

Остальная часть этой статьи содержит обзор:

  • Развертывание Аналитика продуктов данных оператора Azure.
  • Источники данных, которые питают оператор Azure Аналитика продукт данных.
  • Параметры приема данных из этих источников в оператор Azure Аналитика продукт данных.
  • Параметры подключения Azure для получения данных из локального частного центра обработки данных в Azure, где оператор Azure Аналитика продукты данных.
  • URL-адреса потребления, предоставляемые оператором Azure Аналитика продуктом данных.
  • Параметры конфигурации и элементы управления, доступные при развертывании или после развертывания оператора Azure Аналитика продукта данных.
  • Методы мониторинга Аналитика продукта данных оператора Azure.

Развертывание продуктов данных

Вы можете развернуть оператор Azure Аналитика продуктов данных с помощью любого стандартного интерфейса Azure, включая портал Azure, Azure CLI, Azure PowerShell или прямые вызовы к API Azure Resource Manager (ARM). Краткое руководство по развертыванию с помощью портал Azure или Azure CLI см. в руководстве по созданию Аналитика оператора Azure. При развертывании продукта данных можно включить определенные функции, такие как интеграция с Microsoft Purview, ключи, управляемые клиентом, для шифрования данных или ограниченный доступ к продукту данных. Дополнительные сведения о функциях, которые можно включить во время развертывания, см. в разделе "Параметры конфигурации продукта данных" и элементы управления.

Каждый оператор Azure Аналитика продукт данных область для заданной категории или пространства имен данных. Примером является данные из одной сетевой функции (NF), например голосовой SBC. Некоторые продукты данных могут содержать коррелированные данные из нескольких NFS, особенно если NFS относятся к одному поставщику, например UPF, SMF и AMF от поставщика ядер мобильных пакетов. Каждый продукт данных отображается как один ресурс Azure в группе ресурсов и подписке. Вы можете развернуть несколько продуктов данных для разных категорий данных, например для разных NFS мобильных пакетов от разных поставщиков, или ядра мобильного пакета, а также продукта данных сети радиодоступа (RAN).

Корпорация Майкрософт публикует несколько продуктов данных; На следующем рисунке показаны некоторые примеры. Партнеры и операторы также могут разрабатывать и публиковать продукты данных с помощью оператора Azure Аналитика фабрики данных (предварительная версия). Дополнительные сведения о фабрике продуктов данных см. в обзоре фабрики продуктов данных.

Снимок экрана: портал Azure, на котором отображается выбор продуктов данных от Корпорации Майкрософт.

Развертывание оператора Azure Аналитика Продукт данных создает сам ресурс и управляемую группу ресурсов в подписке. Управляемая группа ресурсов содержит экземпляр Azure Key Vault. Экземпляр Key Vault содержит подписанный URL-адрес (SAS), который можно использовать для проверки подлинности при отправке файлов в URL-адрес хранения продукта данных.

После развертывания на экране "Обзор" Аналитика ресурса "Продукт данных Azure" отображаются важные сведения, в том числе:

  • Версия, продукт (тип продукта data) и издатель.
  • URL-адреса хранилища приема (см. сведения о приеме данных).
  • URL-адреса потребления для ADLS и KQL (см. раздел "Потребление данных").

Снимок экрана: портал Azure отображение свойств продукта данных, включая версию, продукт, издатель и URL-адреса приема и потребления.

Источники данных

Каждый оператор Azure Аналитика прием данных из определенного источника данных. Источник данных может быть следующим:

  • Сетевая функция, например ядро мобильного пакета (например , оператор Azure 5G Core), контроллер границы голосового сеанса (SBC), радиодоступная сеть (RAN) или переключатель транспорта.
  • Платформа, например Оператор Azure Nexus.

Прием данных

Существует ряд вариантов приема данных из источника в ваш оператор Azure Аналитика продукт данных.

  • Использование агента приема Аналитика оператора Azure. Это может использовать данные из разных источников и отправлять данные в оператор Azure Аналитика продукт данных. Например, он поддерживает извлечение данных с сервера SFTP или завершение TCP-потока расширенных записей данных (EDR). Дополнительные сведения см. в обзоре агента приема.
  • Используя другие службы и средства Azure. Несколько средств могут передавать данные в оператор Azure Аналитика продукт данных. Например:
    • AzCopy версии 10 — AzCopy из служба хранилища Azure — это надежный, высокий уровень пропускной способности и надежный механизм приема в обоих каналах с низкой задержкой и каналах высокой задержки. С azcopy syncпомощью cron можно автоматизировать прием из локальной виртуальной машины и обеспечить "бесплатный" прием в продукт данных (за исключением стоимости локальной виртуальной машины и сети).
    • Фабрика данных Azure. Сведения об использовании Фабрика данных Azure для приема данных в продукт Аналитика данных оператора Azure.
  • Использование примеров кода, доступных в репозитории оператора Azure Аналитика в качестве основы для создания собственного агента приема или скрипта для отправки данных в продукт Аналитика данных оператора Azure.

Подключение Azure

Существует несколько способов подключения локальных частных центров обработки данных, где находятся источники данных сетевой функции в облаке Azure. Общие сведения о параметрах см. в статье Подключение ivity to Azure — Cloud Adoption Framework. Рекомендации, связанные с телекоммуникациями, см. в целевой зоне сетевой аналитики для операторов.

Потребление данных

Оператор Azure Аналитика Data Products предлагает два URL-адреса потребления для доступа к данным в продукте данных:

  • URL-адрес потребления ADLS, предоставляющий доступ к файлам Parquet для использования в пакетном стиле или интеграции с инструментами ИИ/ МАШИНного обучения.
  • URL-адрес потребления KQL, поддерживающий язык запросов Kusto для аналитики, отчетов и запросов adhoc в режиме реального времени.

Существует несколько возможных интеграции, которые можно создать на основе одного или обоих из этих URL-адресов потребления.

Поддерживается с URL-адресом потребления ADLS продукта данных Поддерживается с URL-адресом потребления KQL продукта данных
Панели мониторинга Обозреватель данных Azure
База данных Обозреватель последователей Azure
Отчеты Power BI
Microsoft Fabric
Студия машинного обучения Azure
Azure Databricks
Приложения логики Azure
Обозреватель службы хранилища Azure
AzCopy

Параметры и элементы управления конфигурацией продукта данных

Оператор Azure Аналитика Data Products имеет несколько параметров конфигурации, которые можно задать при первом развертывании или изменении после развертывания.

Description При настройке Дополнительные сведения
Интеграция с Microsoft Purview Включение интеграции Purview во время развертывания приводит к тому, что в каталоге данных Purview в каталоге данных Purview будут опубликованы таблицы, схемы и происхождения данных продукта данных и его типы данных. При развертывании Использование Microsoft Purview с оператором Azure Аналитика продукта данных
Ключи, управляемые клиентом для хранилища продуктов данных Оператор Azure Аналитика data Products может защитить данные с помощью управляемых ключей Майкрософт или ключей, управляемых клиентом. При развертывании Настройка ресурсов для шифрования данных на основе CMK или Microsoft Purview
Подключение чувствительность для приема и URL-адресов потребления ADLS Оператор Azure Аналитика продукты данных можно настроить для предоставления общедоступного доступа из всех сетей или выбранных виртуальных сетей и IP-адресов. При развертывании. При развертывании с выбранными виртуальными сетями и IP-адресами можно добавлять или удалять сети и IP-адреса после развертывания. --
Подключение тивность для URL-адреса потребления KQL Оператор Azure Аналитика Продукты данных можно настроить для предоставления общедоступного доступа из всех сетей или выбранных IP-адресов. При развертывании. При развертывании с выбранными IP-адресами можно добавить или удалить IP-адреса после развертывания. --
Объем хранения данных и размера горячего кэша Оператор Azure Аналитика Продукты данных изначально развертываются с периодами хранения по умолчанию и длительностью горячего кэша KQL для каждого типа данных (группа данных в продукте данных). Можно задать настраиваемые пороговые значения После развертывания Типы данных в Аналитика оператора Azure
Управление доступом для URL-адреса потребления ADLS Доступ к URL-адресу потребления ADLS управляется оператором Azure Аналитика продукт данных путем создания маркера SAS после развертывания. После развертывания --
Управление доступом для URL-адреса потребления KQL Доступ к URL-адресу потребления KQL предоставляется путем добавления субъекта (который может быть отдельным пользователем, группой или управляемым удостоверением) в качестве читателя или ограниченного чтения. После развертывания Управление разрешениями на URL-адрес потребления KQL

Наблюдение

После развертывания продукта данных его можно отслеживать для работоспособных операций или устранения неполадок с помощью метрик, журналов ресурсов и журналов действий. Дополнительные сведения см. в разделе "Мониторинг операторов Azure" Аналитика.

Следующий шаг