Карта эластичных данных в Microsoft Purview
Схема данных Microsoft Purview обеспечивает основу для обнаружения данных и управления данными. Он собирает метаданные о данных, присутствующих в аналитике, программном обеспечении как услуга (SaaS) и операционных системах в гибридных, локальных и многооблачных средах. Карта данных остается в актуальном состоянии благодаря встроенной системе сканирования и классификации.
Все учетные записи Microsoft Purview имеют карту данных, которая начинается с одной единицы емкости и может эластично увеличиваться. Они масштабируются в зависимости от нагрузки запроса и метаданных, хранящихся в карте данных.
Единица емкости карты данных
Карта эластичных данных состоит из двух компонентов: хранилища метаданных и пропускной способности операций, представленных в виде единицы емкости (CU). Все учетные записи Microsoft Purview по умолчанию начинаются с одной единицы емкости и эластично растут в зависимости от использования. Каждая единица емкости карты данных включает пропускную способность 25 операций в секунду и 10 ГБ хранилища метаданных.
Операции
Операции — это мера пропускной способности Схема данных Microsoft Purview. Они включают все операции создания, чтения, записи, обновления и удаления метаданных, хранящихся в схеме данных. Ниже приведены некоторые примеры операций.
- Создание ресурса в схеме данных
- Добавьте отношение к ресурсу, например владельцу, стюарду, родителю, происхождению и т. д.
- Измените ресурс, чтобы добавить бизнес-метаданные, такие как описание, термин глоссария и т. д.
- Поиск по ключевым словам, возвращающий результаты на страницу результатов поиска.
Хранилища
Хранилище является вторым компонентом карты данных и включает в себя хранение технических, бизнес-, операционных и семантических метаданных.
Технические метаданные включают схему, тип данных, столбцы и т. д., обнаруженные во время сканирования Microsoft Purview. Бизнес-метаданные включают автоматизированные (например, повышение из наборов данных Power BI или описания из таблиц SQL) и ручное присвоение тегов описаниям, терминов глоссария и т. д. Примеры семантических метаданных включают сопоставление коллекции с источниками данных или классификациями. Операционные метаданные включают в себя состояние копирования фабрики данных и действия потока данных, а также время выполнения.
Работа с картой эластичных данных
Эластичная карта данных с автоматическим масштабированием — вы начинаете с карты данных с одной единицы емкости, которая может автомасштабироваться в зависимости от нагрузки. Для большинства организаций эта функция приводит к увеличению экономии и снижению цен на запуск проектов по управлению данными. Эта функция влияет на цены.
Расширенный & прием данных — вы можете отслеживать и контролировать заполнение ресурсов данных, классификацию и происхождение данных в процессах сканирования и приема данных. Эта функция влияет на цены.
Сценарий
Клаудия — администратор Azure в Компании Contoso, который хочет создать учетную запись Microsoft Purview из портал Azure. Она не знает необходимый размер Схема данных Microsoft Purview для поддержки будущего состояния платформы. Однако она знает, что плата за Схема данных Microsoft Purview взимается с использованием единиц емкости, на которые влияет пропускная способность хранилища и операций. Она хочет создать наименьшую карту данных, чтобы обеспечить низкую стоимость и увеличить размер карты данных эластично в зависимости от потребления.
Claudia может создать учетную запись Microsoft Purview с размером карты данных по умолчанию, равным одной единице емкости, которая может автоматически увеличивать и уменьшать масштаб. Функция автомасштабирования также позволяет настраивать емкость на основе периодических или запланированных всплесков данных в определенные периоды. Claudia выполняет следующие шаги в процессе создания, чтобы настроить конфигурацию сети и завершает создание.
В портал Azure на вкладке метрики для учетной записи Microsoft Purview Claudia может увидеть потребление хранилища карты данных и пропускную способность операций. Она может дополнительно настроить оповещение, когда пропускная способность хранилища или операций достигает определенного предела, чтобы отслеживать потребление и выставление счетов за новую учетную запись Microsoft Purview.
Выставление счетов на карте данных
Клиентам выставляется плата за одну единицу емкости (25 операций в секунду и 10 ГБ), а дополнительное выставление счетов зависит от потребления каждой дополнительной единицы емкости, сложенной до часа. Операции карты данных масштабируется с шагом 25 операций в секунду, а хранилище метаданных — с шагом в 10 ГБ. Схема данных Microsoft Purview может автоматически увеличивать и уменьшать масштаб в пределах окна эластичности (проверка текущих ограничений). Однако для получения следующего окна эластичности необходимо создать запрос в службу поддержки.
Единицы емкости карты данных поставляются с ограничением пропускной способности операций и хранилища. Если объем хранилища превышает текущую единицу емкости, с клиентов взимается плата за следующую единицу емкости, даже если пропускная способность операций не используется. В приведенной ниже таблице показаны диапазоны единиц емкости карты данных. Обратитесь в службу поддержки, если единица емкости карты данных превышает 100 единиц емкости.
| Единица емкости карты данных | Пропускная способность операций в секунду | Емкость хранилища в ГБ |
|---|---|---|
| 1 | 25 | 10 |
| 2 | 50 | 20 |
| 3 | 75 | 30 |
| 4 | 100 | 40 |
| 5 | 125 | 50 |
| 6 | 150 | 60 |
| 7 | 175 | 70 |
| 8 | 200 | 80 |
| 9 | 225 | 90 |
| 10 | 250 | 100 |
| .. | .. | .. |
| 100 | 2500 | 1000 |
Примеры выставления счетов
Пропускная способность Схема данных Microsoft Purview за указанный час меньше или равна 25 операций в секунду, а размер хранилища — 1 ГБ. Клиентам выставляется плата за одну единицу емкости.
пропускная способность Схема данных Microsoft Purview за указанный час меньше или равна 25 операций в секунду, а размер хранилища — 15 ГБ. Клиентам выставляется счет за две единицы емкости.
Пропускная способность Схема данных Microsoft Purview за указанный час составляет 50 операций в секунду, а размер хранилища — 15 ГБ. Клиентам выставляется счет за две единицы емкости.
Пропускная способность Схема данных Microsoft Purview за указанный час составляет 50 операций в секунду, а размер хранилища — 25 ГБ. Клиентам выставляется счет за три единицы емкости.
Пропускная способность Схема данных Microsoft Purview за указанный час составляет 250 операций в секунду, а размер хранилища — 15 ГБ. Клиентам выставляется счет за 10 единиц емкости.
Подробный пример выставления счетов
В примере выставления счетов на карте данных показана карта данных с растущим объемом хранилища метаданных и операций переменных в секунду в течение шести часов с 12:00 до 18:00. Красная линия на графике — потребление операций в секунду, а синяя пунктирная линия — это потребление хранилища метаданных в течение этого шестичасового окна:
Каждая единица емкости карты данных поддерживает 25 операций в секунду и 10 ГБ хранилища метаданных. Плата за карту данных взимается ежечасно. Плата взимается за максимальное количество единиц емкости карты данных, необходимых в течение часа, при этом не менее одной единицы емкости. Иногда вам может потребоваться больше операций в секунду в течение часа, а больше операций увеличивает количество единиц емкости, необходимых в течение этого часа. В других случаях использование операций в секунду может быть низким, но вам по-прежнему может потребоваться большой объем хранилища метаданных. Хранилище метаданных определяет, сколько единиц емкости необходимо в течение часа.
В таблице показано максимальное количество операций в секунду и хранилища метаданных, используемых в час для этого примера выставления счетов:
В зависимости от операций карты данных в секунду и потребления хранилища метаданных за этот период, плата за эту карту данных будет взиматься за 22 часа единицы емкости в течение этого шестичасового периода (1 + 3 + 4 + 5 + 6 + 3):
Важно!
Схема данных Microsoft Purview может автоматически увеличивать и уменьшать масштаб в пределах окна эластичности (проверка текущих ограничений). Чтобы получить следующий уровень окна эластичности, необходимо создать запрос в службу поддержки.
Увеличение пропускной способности операций
Ограничение по умолчанию для максимального количества операций в секунду — 10 единиц емкости. Если вы работаете с большой средой Microsoft Purview и вам требуется более высокая пропускная способность, вы можете запросить большую емкость окна эластичности, создав запрос квоты. Выберите "Единица емкости карты данных" в качестве типа квоты. Предоставьте как можно больше информации о вашей среде и дополнительной емкости, которую вы хотите запросить.
Важно!
По умолчанию для хранилища метаданных нет ограничений. По мере добавления дополнительных метаданных в карту данных они будут эластично увеличиваться.
Увеличение ограничения пропускной способности операций также увеличивает минимальное количество единиц емкости. Если увеличить ограничение пропускной способности до 20, минимальная плата за единицы емкости составляет 2 единицы. В приведенной ниже таблице показаны возможные варианты пропускной способности. Номер, который вы вводите в запросе квоты, — это минимальное количество единиц емкости в учетной записи.
| Минимальные единицы емкости | Ограничение пропускной способности операций |
|---|---|
| 1 | 10 (по умолчанию) |
| 2 | 20 |
| 3 | 30 |
| 4 | 40 |
| 5 | 50 |
| 6 | 60 |
| 7 | 70 |
| 8 | 80 |
| 9 | 90 |
| 10 | 100 |
Мониторинг карты эластичных данных
Единицы емкости карты метрик и размер хранилища карты данных можно отслеживать, чтобы понять размер хранилища данных и выставление счетов.
Перейдите на портал Azure, перейдите на страницу учетных записей Microsoft Purview и выберите учетную запись Purview.
Выберите Обзор и прокрутите вниз , чтобы просмотреть метрики единиц емкости карты данных и размера хранилища карты данных за разные периоды времени.
Для других параметров перейдите в раздел Мониторинг —> метрики , чтобы просмотреть единицы емкости карты данных и Размер хранилища карты данных.
Выберите единицы емкости карты данных , чтобы просмотреть использование единиц емкости карты данных за последние 24 часа. Обратите внимание, что наведение указателя мыши на график указывает, что единицы емкости карты данных, потребляемые в это конкретное время в определенный день.
Выберите местное время: последние 24 часа (автоматический — 1 час) в правом верхнем углу экрана, чтобы изменить диапазон времени, отображаемый для графа.
Настройте тип графа, выбрав параметр:
Выберите новую диаграмму , чтобы добавить граф для диаграммы Размер хранилища карты данных.
Сводка
С помощью эластичной карты данных Microsoft Purview обеспечивает недорогой барьер для клиентов, чтобы начать процесс управления данными. Схема данных Microsoft Purview может расти эластично с оплатой по мере использования модели, начиная с одного единицы емкости. Клиентам не нужно беспокоиться о выборе правильного размера карты данных для своего пространства данных во время создания.