Mapa de datos elásticos en Microsoft Purview
El Mapa de datos de Microsoft Purview proporciona la base para la detección de datos y la gobernanza de datos. Captura metadatos sobre los datos presentes en análisis, software como servicio (SaaS) y sistemas operativos en entornos híbridos, locales y multinube. El mapa de datos permanece actualizado con su sistema de examen y clasificación integrado.
Todas las cuentas de Microsoft Purview tienen un mapa de datos que comienza en una unidad de capacidad y puede crecer elásticamente. Se escalan y reducen verticalmente en función de la carga de solicitudes y los metadatos almacenados en el mapa de datos.
Unidad de capacidad del mapa de datos
La asignación de datos elástica tiene dos componentes: almacenamiento de metadatos y rendimiento de la operación, representados como una unidad de capacidad (CU). De forma predeterminada, todas las cuentas de Microsoft Purview comienzan con una unidad de capacidad y aumentan elásticamente en función del uso. Cada unidad de capacidad de asignación de datos incluye un rendimiento de 25 operaciones por segundo y 10 GB de límite de almacenamiento de metadatos.
Operaciones
Las operaciones son la medida de rendimiento del Mapa de datos de Microsoft Purview. Incluyen cualquier operación de creación, lectura, escritura, actualización y eliminación de metadatos almacenados en la asignación de datos. Algunos ejemplos de operaciones son:
- Creación de un recurso en Data Map
- Agregue una relación a un recurso como propietario, administrador, primario, linaje, etc.
- Edite un recurso para agregar metadatos empresariales como la descripción, el término del glosario, etc.
- Búsqueda de palabras clave que devuelve resultados a la página de resultados de búsqueda.
Almacenamiento
El almacenamiento es el segundo componente de Data Map e incluye el almacenamiento de metadatos técnicos, empresariales, operativos y semánticos.
Los metadatos técnicos incluyen esquema, tipo de datos, columnas, etc., que se detectan durante el examen de Microsoft Purview. Los metadatos empresariales incluyen automatizados (por ejemplo, promocionados desde conjuntos de datos de Power BI o descripciones de tablas SQL) y etiquetado manual de descripciones, términos del glosario, etc. Algunos ejemplos de metadatos semánticos son la asignación de recopilación a orígenes de datos o las clasificaciones. Los metadatos operativos incluyen estados de ejecución de actividad de flujo de datos y copia de Data Factory y tiempo de ejecución.
Trabajo con mapa de datos elásticos
Mapa de datos elásticos con escalado automático : comienza con un mapa de datos tan bajo como una unidad de capacidad que puede escalar automáticamente en función de la carga. Para la mayoría de las organizaciones, esta característica conduce a un mayor ahorro y a un menor precio para iniciar proyectos de gobernanza de datos. Esta característica afecta a los precios.
Ingesta de análisis & mejorada : puede realizar un seguimiento y controlar la población de los recursos de datos, la clasificación y el linaje en los procesos de examen e ingesta. Esta característica afecta a los precios.
Escenario
Claudia es una administradora de Azure en Contoso que quiere crear una nueva cuenta de Microsoft Purview a partir de Azure Portal. No conoce el tamaño necesario de Mapa de datos de Microsoft Purview para admitir el estado futuro de la plataforma. Sin embargo, sabe que la Mapa de datos de Microsoft Purview se factura mediante unidades de capacidad, que se ven afectadas por el rendimiento del almacenamiento y las operaciones. Quiere crear el mapa de datos más pequeño para mantener el costo bajo y aumentar el tamaño del mapa de datos de forma elástica en función del consumo.
Claudia puede crear una cuenta de Microsoft Purview con el tamaño de mapa de datos predeterminado de una unidad de capacidad que se puede escalar y reducir verticalmente automáticamente. La característica de escalado automático también permite optimizar la capacidad en función de ráfagas de datos intermitentes o planeadas durante períodos específicos. Claudia sigue los pasos siguientes en la experiencia de creación para configurar la red y completa la creación.
En el Azure Portal, en la pestaña métricas de la cuenta de Microsoft Purview, Claudia puede ver el consumo del almacenamiento y el rendimiento de las operaciones de Data Map. Puede configurar aún más una alerta cuando el rendimiento del almacenamiento o las operaciones alcanza un límite determinado para supervisar el consumo y la facturación de la nueva cuenta de Microsoft Purview.
Facturación del mapa de datos
Los clientes se facturan por una unidad de capacidad (25 operaciones por segundo y 10 GB) y la facturación adicional se basa en el consumo de cada unidad de capacidad adicional enrollada hasta la hora. Las operaciones de Mapa de datos se escalan en los incrementos de 25 operaciones por segundo y el almacenamiento de metadatos se escala en los incrementos de 10 GB de tamaño. Mapa de datos de Microsoft Purview puede escalar y reducir verticalmente automáticamente dentro de la ventana de elasticidad (compruebe los límites actuales). Sin embargo, para obtener el siguiente nivel de ventana de elasticidad, es necesario crear una incidencia de soporte técnico.
Las unidades de capacidad de Mapa de datos tienen un límite en el rendimiento y el almacenamiento de las operaciones. Si el almacenamiento supera la unidad de capacidad actual, se cobra a los clientes la siguiente unidad de capacidad incluso si no se usa el rendimiento de las operaciones. En la tabla siguiente se muestran los intervalos de unidades de capacidad de Mapa de datos. Póngase en contacto con el soporte técnico si la unidad de capacidad de Mapa de datos supera las 100 unidades de capacidad.
| Unidad de capacidad del mapa de datos | Rendimiento de operaciones/s | Capacidad de almacenamiento en GB |
|---|---|---|
| 1 | 25 | 10 |
| 2 | 50 | 20 |
| 3 | 75 | 30 |
| 4 | 100 | 40 |
| 5 | 125 | 50 |
| 6 | 150 | 60 |
| 7 | 175 | 70 |
| 8 | 200 | 80 |
| 9 | 225 | 90 |
| 10 | 250 | 100 |
| .. | .. | .. |
| 100 | 2500 | 1000 |
Ejemplos de facturación
el rendimiento de la operación de Mapa de datos de Microsoft Purview durante la hora especificada es menor o igual que 25 operaciones por segundo y el tamaño de almacenamiento es de 1 GB. A los clientes se les factura una unidad de capacidad.
el rendimiento de la operación de Mapa de datos de Microsoft Purview durante la hora especificada es menor o igual que 25 operaciones/s y el tamaño de almacenamiento es de 15 GB. A los clientes se les facturan dos unidades de capacidad.
el rendimiento de la operación de Mapa de datos de Microsoft Purview durante la hora determinada es de 50 operaciones por segundo y el tamaño de almacenamiento es de 15 GB. A los clientes se les facturan dos unidades de capacidad.
el rendimiento de la operación de Mapa de datos de Microsoft Purview durante la hora determinada es de 50 operaciones por segundo y el tamaño de almacenamiento es de 25 GB. A los clientes se les facturan tres unidades de capacidad.
el rendimiento de la operación de Mapa de datos de Microsoft Purview durante la hora especificada es de 250 operaciones por segundo y el tamaño de almacenamiento es de 15 GB. A los clientes se les factura por 10 unidades de capacidad.
Ejemplo de facturación detallado
En el ejemplo de facturación mapa de datos se muestra un mapa de datos con crecientes operaciones de almacenamiento de metadatos y variables por segundo durante un período de seis horas desde las 12 p. m. hasta las 18:00. La línea roja del gráfico es el consumo de operaciones por segundo y la línea de puntos azul es el consumo de almacenamiento de metadatos en esta ventana de seis horas:
Cada unidad de capacidad de Mapa de datos admite 25 operaciones por segundo y 10 GB de almacenamiento de metadatos. El mapa de datos se factura cada hora. Se factura por las unidades de capacidad máximas de Mapa de datos necesarias dentro de la hora, con un mínimo de una unidad de capacidad. A veces, es posible que necesite más operaciones por segundo dentro de la hora y que más operaciones aumenten el número de unidades de capacidad necesarias en esa hora. En otras ocasiones, el uso de operaciones por segundo puede ser bajo, pero es posible que todavía necesite un gran volumen de almacenamiento de metadatos. El almacenamiento de metadatos es lo que determina cuántas unidades de capacidad necesita dentro de la hora.
En la tabla se muestra el número máximo de operaciones/segundo y el almacenamiento de metadatos que se usa por hora para este ejemplo de facturación:
En función del consumo de almacenamiento de metadatos y las operaciones de Mapa de datos en este período, este mapa de datos se facturará por 22 horas de unidad de capacidad durante este período de seis horas (1 + 3 + 4 + 5 + 6 + 3):
Importante
Mapa de datos de Microsoft Purview puede escalar y reducir verticalmente automáticamente dentro de la ventana de elasticidad (compruebe los límites actuales). Para obtener el siguiente nivel de la ventana de elasticidad, es necesario crear una incidencia de soporte técnico.
Aumento del límite de rendimiento de las operaciones
El límite predeterminado para las operaciones máximas por segundo es de 10 unidades de capacidad. Si trabaja con un entorno de Microsoft Purview grande y requiere un mayor rendimiento, puede solicitar una ventana de capacidad de elasticidad mayor mediante la creación de una solicitud de cuota. Seleccione "Unidad de capacidad de mapa de datos" como tipo de cuota. Proporcione toda la información relevante que pueda sobre su entorno y la capacidad adicional que desea solicitar.
Importante
No hay ningún límite predeterminado para el almacenamiento de metadatos. A medida que agregue más metadatos al mapa de datos, aumentará elásticamente.
El aumento del límite de rendimiento de las operaciones también aumenta el número mínimo de unidades de capacidad. Si aumenta el límite de rendimiento a 20, las unidades de capacidad mínima que se le cobran son 2 CPU. En la tabla siguiente se muestran las posibles opciones de rendimiento. El número especificado en la solicitud de cuota es el número mínimo de unidades de capacidad de la cuenta.
| Unidades de capacidad mínima | Límite de rendimiento de las operaciones |
|---|---|
| 1 | 10 (valor predeterminado) |
| 2 | 20 |
| 3 | 30 |
| 4 | 40 |
| 5 | 50 |
| 6 | 60 |
| 7 | 70 |
| 8 | 80 |
| 9 | 90 |
| 10 | 100 |
Supervisión del mapa de datos elásticos
Las unidades de capacidad del mapa de datos de métricas y el tamaño de almacenamiento del mapa de datos se pueden supervisar para comprender el tamaño del patrimonio de datos y la facturación.
Vaya al Azure Portal, vaya a la página Cuentas de Microsoft Purview y seleccione su cuenta de Purview.
Seleccione Información general y desplácese hacia abajo para observar la sección Supervisión de las métricas Unidades de capacidad de mapa de datos y Tamaño de almacenamiento del mapa de datos durante distintos períodos de tiempo.
Para otras opciones de configuración, vaya a Supervisión:> métricas para observar las unidades de capacidad del mapa de datos y el tamaño del almacenamiento del mapa de datos.
Seleccione Unidades de capacidad de mapa de datos para ver el uso de la unidad de capacidad del mapa de datos en las últimas 24 horas. Observe que al mantener el mouse sobre el gráfico de líneas, se indican las unidades de capacidad del mapa de datos consumidas en esa hora determinada del día determinado.
Seleccione la hora local: últimas 24 horas (automática - 1 hora) en la parte superior derecha de la pantalla para modificar el intervalo de tiempo mostrado para el gráfico.
Personalice el tipo de gráfico seleccionando la opción :
Seleccione el nuevo gráfico para agregar el gráfico para el gráfico Tamaño de almacenamiento del mapa de datos.
Resumen
Con Elastic Data Map, Microsoft Purview proporciona una barrera de bajo costo para que los clientes inicien su recorrido de gobernanza de datos. Mapa de datos de Microsoft Purview puede crecer elásticamente con el modelo de pago por uso a partir de tan pequeña como una unidad de capacidad. Los clientes no necesitan preocuparse por elegir el tamaño correcto del mapa de datos para su patrimonio de datos en el momento de la creación.