Partekatu honen bidez:

Supervisión de Azure Synapse Analytics

  • Artikulua

En este artículo se describe:

  • Los tipos de datos de supervisión que puede recopilar para este servicio.
  • Formas de analizar esos datos.

Nota:

Si ya está familiarizado con este servicio o Azure Monitor y solo quiere saber cómo analizar los datos de supervisión, consulte la sección Analizar cerca del final de este artículo.

Cuando tenga aplicaciones críticas y procesos empresariales que dependan de los recursos de Azure, deberá supervisar y obtener alertas para el sistema. El servicio Azure Monitor recopila y agrega métricas y registros de todos los componentes del sistema. Azure Monitor proporciona una vista de la disponibilidad, el rendimiento y la resistencia, y le notifica los problemas. Puede usar Azure Portal, PowerShell, la CLI de Azure, la API de REST o las bibliotecas cliente para configurar y ver los datos de supervisión.

Opciones de supervisión de Synapse Analytics

Puede recopilar y analizar métricas y registros para grupos de SQL integrados y sin servidor de Azure Synapse Analytics, grupos de SQL dedicados, grupos de Azure Spark y grupos de Data Explorer (versión preliminar). Puede supervisar las actividades actuales e históricas de SQL, Apache Spark, canalizaciones y desencadenadores y entornos de ejecución de integración.

Hay varias maneras de supervisar las actividades en el área de trabajo de Synapse Analytics.

Synapse Studio

Abra Synapse Studio y vaya al centro de supervisión para ver un historial de todas las actividades del área de trabajo y cuáles están activas.

  • En Integration (Integración), puede supervisar las canalizaciones, los desencadenadores y los entornos de ejecución de integración.
  • En Actividades, puede supervisar las actividades de Spark y SQL.

Para más información sobre la supervisión en Synapse Studio, consulte Supervisión del área de trabajo de Synapse.

DMV y almacén de consultas

Para supervisar Synapse SQL mediante programación a través de T-SQL, Synapse Analytics proporciona un conjunto de vistas de administración dinámica (DMV). Estas vistas son útiles para solucionar problemas e identificar cuellos de botella de rendimiento con la carga de trabajo. Para más información, consulte DMV y Supervisión de la carga de trabajo del grupo de SQL dedicado de Azure Synapse Analytics mediante DMV. Para obtener la lista de DMV que se aplican a Synapse SQL, consulte Vistas de administración dinámica (DMV) del grupo de SQL dedicados.

Almacén de consultas es un conjunto de almacenes internos y DMV que proporcionan información sobre la elección y el rendimiento del plan de consulta. El Almacén de consultas simplifica la solución de problemas de rendimiento al ayudar a encontrar diferencias de rendimiento causadas por los cambios del plan de consulta. Para obtener más información sobre cómo habilitar y usar el Almacén de consultas en bases de datos de Synapse Analytics, consulte Almacén de consultas.

Azure portal

Puede supervisar áreas de trabajo y grupos de Synapse Analytics directamente desde sus páginas de Azure Portal. En el menú de la barra lateral izquierda, puede acceder al del Registro de actividad de Azure o seleccionar Alertas, Métricas, configuración de diagnóstico, Registros, o Recomendaciones Advisor en la sección Supervisión. En este artículo se proporcionan más detalles sobre estas opciones.

Tipos de recursos

Azure usa el concepto de tipos de recursos e identificadores para identificar todo el contenido de una suscripción. Los tipos de recursos también forman parte de los identificadores de recursos para cada recurso que se ejecuta en Azure. Por ejemplo, un tipo de recurso para una máquina virtual es Microsoft.Compute/virtualMachines. Para obtener una lista de los servicios y sus tipos de recursos asociados, consulte Proveedores de recursos.

De forma similar, Azure Monitor organiza los datos principales de supervisión en métricas y registros en función de tipos de recursos, que también se denominan espacios de nombres. Hay diferentes métricas y registros disponibles para distintos tipos de recursos. Es posible que el servicio esté asociado a más de un tipo de recurso.

Los tipos de recursos para Synapse Analytics incluyen:

  • Microsoft.Synapse/workspaces
  • Microsoft.Synapse/workspaces/bigDataPools
  • Microsoft.Synapse/workspaces/kustoPools
  • Microsoft.Synapse/workspaces/scopePools
  • Microsoft.Synapse/workspaces/sqlPools

Para más información sobre los tipos de recursos para Azure Synapse Analytics, consulte Referencia de datos de supervisión de Azure Synapse Analytics.

Almacenamiento de datos

Para Azure Monitor:

  • Los datos de métricas se almacenan en la base de datos de métricas de Azure Monitor.
  • Los datos de registro se almacenan en el almacén de registros de Azure Monitor. Log Analytics es una herramienta de Azure Portal que puede hacer consultas en este almacén.
  • El registro de actividad de Azure es un almacén independiente con su propia interfaz en Azure Portal.

Opcionalmente, puede enrutar los datos del registro de actividad y las métricas al almacén de registros de Azure Monitor. A continuación, puede usar Log Analytics para consultar los datos y correlacionarlos con otros datos de registro.

Muchos servicios pueden usar la configuración de diagnóstico para enviar datos de métricas y de registro a otras ubicaciones de almacenamiento fuera de Azure Monitor. Algunos ejemplos son Azure Storage, sistemas de asociados hospedados y sistemas de asociados que no son de Azure mediante Event Hubs.

Para obtener información detallada sobre cómo Azure Monitor almacena datos, consulte Plataforma de datos de Azure Monitor.

Synapse Analytics admite el almacenamiento de datos de supervisión en Azure Storage o Azure Data Lake Storage Gen2.

Métricas de plataforma de Azure Monitor

Azure Monitor proporciona métricas de plataforma para la mayoría de los servicios. Estas son las métricas:

  • Se define individualmente para cada espacio de nombres.
  • Almacenado en la base de datos de métricas de serie temporal de Azure Monitor.
  • Ligero y capaz de admitir alertas casi en tiempo real.
  • Se usa para supervisar el rendimiento de un recurso a lo largo del tiempo.

Recopilación: Azure Monitor recopila automáticamente las métricas de la plataforma. No se requiere ninguna configuración.

Enrutamiento: también puede enrutar algunas métricas de la plataforma a registros de Azure Monitor o Log Analytics para poder consultarlas con otros datos de registro. Compruebe el valor Exportación de DS para ver si puede usar una configuración de diagnóstico a fin de enrutar la métrica a registros de Azure Monitor o Log Analytics.

Para obtener una lista de todas las métricas que es posible recopilar para todos los recursos de Azure Monitor, consulte Métricas admitidas en Azure Monitor.

Para obtener listas de métricas de plataforma disponibles para Synapse Analytics, consulte Referencia de datos de supervisión de Synapse Analytics.

Además de Log Analytics, los grupos de Apache Spark de Synapse Analytics admiten métricas de servidor Prometheus y paneles de Grafana. Para más información, consulte Supervisión de métricas de aplicaciones de Apache Spark con Prometheus y Grafana y Recopilación de métricas de aplicaciones de Apache Spark mediante las API de Prometheus.

Registros de recursos de Azure Monitor

Los registros de recursos proporcionan información sobre las operaciones realizadas por un recurso de Azure. Los registros se generan automáticamente, pero debe enrutarlos a los registros de Azure Monitor para guardarlos o consultarlos. Los registros se organizan en categorías. Un espacio de nombres determinado puede tener varias categorías de registro de recursos.

Recopilación: los registros de recursos no se recopilan ni almacenan hasta que se crea una configuración de diagnóstico y se enrutan los registros a una o varias ubicaciones. Cuando se crea una configuración de diagnóstico, se especifican las categorías de registros que se van a recopilar. Hay varias maneras de crear y mantener la configuración de diagnóstico, como Azure Portal, hacerlo mediante programación o usar Azure Policy.

Enrutamiento: el valor predeterminado sugerido es enrutar los registros de recursos a los registros de Azure Monitor para poder consultarlos con otros datos de registro. También están disponibles otras ubicaciones como Azure Storage, Azure Event Hubs y determinados asociados de supervisión de Microsoft. Para más información, consulte los Registros de recursos de Azure y los Destinos de registro de recursos.

Para obtener información detallada sobre cómo recopilar, almacenar y enrutar registros de recursos, consulte Configuración de diagnóstico en Azure Monitor.

Para obtener una lista de todas las categorías de registro de recursos disponibles en Azure Monitor, consulte Registros de recursos admitidos en Azure Monitor.

Todos los registros de recursos de Azure Monitor tienen los mismos campos de encabezado, seguidos de campos específicos del servicio. El esquema común se describe en Esquema de registros de recursos de Azure Monitor.

Para las categorías de registro de recursos disponibles, sus tablas de Log Analytics asociadas y los esquemas de registro de Synapse Analytics, consulte Referencia de datos de supervisión de Synapse Analytics.

Registro de actividades de Azure

El registro de actividad contiene eventos de nivel de suscripción que realizan el seguimiento de las operaciones de cada recurso de Azure, tal como se ve desde fuera de ese recurso; por ejemplo, crear un recurso o iniciar una máquina virtual.

Recopilación: los eventos del registro de actividad se generan y recopilan automáticamente en un almacén independiente para su visualización en Azure Portal.

Enrutamiento: puedes enviar datos del registro de actividad a los registros de Azure Monitor para poder analizarlos junto con otros datos de registro. También están disponibles otras ubicaciones como Azure Storage, Azure Event Hubs y determinados asociados de supervisión de Microsoft. Para más información sobre cómo enrutar el registro de actividad, consulte Información general del registro de actividad de Azure.

Analizar los datos de supervisión

Hay muchas herramientas para analizar los datos de supervisión.

Herramientas de Azure Monitor

Azure Monitor admite las siguientes herramientas básicas:

Entre las herramientas que permiten una visualización más compleja se incluyen:

  • Paneles que permiten combinar diferentes tipos de datos en un único panel de Azure Portal.
  • Libros: informes personalizables que se pueden crear en Azure Portal. Los libros pueden incluir texto, métricas y consultas de registro.
  • Grafana: una herramienta de plataforma abierta que se destaca en los paneles operativos. Puede usar Grafana para crear paneles que incluyan datos de varios orígenes distintos de Azure Monitor.
  • Power BI: un servicio de análisis empresarial que proporciona visualizaciones interactivas en varios orígenes de datos. Puede configurar Power BI para que los datos de registro se importen automáticamente desde Azure Monitor y utilizar estas otras adicionales.

Además de las herramientas básicas, Synapse Analytics admite el Almacén de consultas, DMV o Azure Data Explorer para analizar el historial y el rendimiento de las consultas. Para obtener una comparación de estos métodos de análisis, consulte Almacenamiento y análisis de consultas históricos en Azure Synapse Analytics.

Herramientas de exportación de Azure Monitor

Puede obtener datos de Azure Monitor en otras herramientas mediante los siguientes métodos:

Para empezar a trabajar con la API de REST para Azure Monitor, consulte Tutorial de la API de REST de supervisión de Azure.

Consultas de Kusto

Puedes analizar datos de supervisión en el almacén de registros de Azure Monitor o Log Analytics mediante el lenguaje de consulta Kusto (KQL).

Importante

Al seleccionar Registros en el menú del servicio del portal, Log Analytics se abre con el ámbito de consulta establecido en el servicio actual. Este ámbito significa que las consultas de registro solo incluirán datos de ese tipo de recurso. Si quiere ejecutar una consulta que incluya datos de otros servicios de Azure, seleccione Registros en el menú Azure Monitor. Consulte Ámbito e intervalo de tiempo de una consulta de registro en Log Analytics de Azure Monitor para obtener más información.

Para obtener una lista de las consultas comunes de cualquier servicio, consulte Interfaz de consultas de Log Analytics.

Consultas de ejemplo

Consulta del registro de actividad para operaciones con errores: enumera todos los informes de operaciones con error en la última hora.

AzureActivity 
| where TimeGenerated > ago(1h)  
| where ActivityStatus == "Failed"

Eventos de error de tabla de Synapse Link: muestra eventos de tabla de Synapse Link con errores.

SynapseLinkEvent
| where OperationName == "TableFail"
| limit 100

Alertas

Las alertas de Azure Monitor le informan de forma proactiva cuando se detectan condiciones específicas en los datos que se supervisan. Las alertas permiten identificar y solucionar las incidencias en el sistema antes de que los clientes puedan verlos. Para obtener más información, vea Alertas de Azure Monitor.

Hay muchos orígenes de alertas comunes para los recursos de Azure. Para obtener ejemplos de alertas comunes para recursos de Azure, consulte Consultas de alertas de registro de ejemplo. El sitio de Alertas de línea de base de Azure Monitor (AMBA) proporciona un método semiautomatizado para implementar alertas, paneles e instrucciones importantes de métricas de plataforma. El sitio se aplica a un subconjunto de servicios de Azure que se expande continuamente, incluidos todos los servicios que forman parte de la zona de aterrizaje de Azure (ALZ).

El esquema de alerta común normaliza el consumo de notificaciones de alerta de Azure Monitor. Para obtener más información, consulte Esquema de alertas comunes.

Tipos de alertas

Puede alertar sobre cualquier métrica o fuente de datos de registro en la plataforma de datos de Azure Monitor. Hay muchos tipos diferentes de alertas en función de los servicios que está supervisando y de los datos de supervisión que está recopilando. Los distintos tipos de alertas tienen varias ventajas y desventajas. Para obtener más información, consulte Elegir el tipo de alerta de supervisión adecuado.

En la siguiente lista se describen los tipos de alertas de Azure Monitor que puede crear:

  • Alertas de métricas: evalúan las métricas de recursos a intervalos regulares. Las métricas pueden ser métricas de plataforma, métricas personalizadas, registros de Azure Monitor convertidos en métricas o métricas de Application Insights. Las alertas de métricas también pueden aplicar varias condiciones y umbrales dinámicos.
  • Alertas de registro: permiten a los usuarios emplear una consulta de Log Analytics para evaluar los registros de recursos con una frecuencia predefinida.
  • Alertas del registro de actividad: se desencadenan cuando se produce un nuevo evento del registro de actividad que coincide con las condiciones definidas. Las alertas de Resource Health y de Service Health son alertas del registro de actividad que informan sobre el servicio y el estado de los recursos.

Algunos servicios de Azure también admiten alertas de detección inteligente, alertas de Prometheus, o reglas de alerta recomendadas.

Para algunos servicios, puede supervisar a escala aplicando la misma regla de alertas de métricas a varios recursos del mismo tipo que existen en la misma región de Azure. Se envían notificaciones individuales para cada recurso supervisado. Para obtener servicios y nubes de Azure compatibles, consulte Supervisión de varios recursos con una regla de alerta.

Reglas de alertas de Synapse Analytics

En la tabla siguiente se enumeran algunas alertas sugeridas para Synapse Analytics. Estas alertas son solo ejemplos. Puede establecer alertas para cualquier entrada de métrica, entrada de registro o registro de actividad que aparezca en la Referencia de datos de supervisión de Synapse Analytics.

Tipo de alerta Condición Descripción
Métrica TempDB 75 % Porcentaje máximo de tempdb local usado mayor o igual que el 75 % del valor de umbral
Métrica Uso de la unidad de almacenamiento de datos (DWU) cerca del 100 % Porcentaje medio de DWU usado mayor que el 95 % durante 1 hora
Log Analytics SynapseSqlPoolRequestSteps ShuffleMoveOperation en más de 10 millones de filas

Para más información sobre cómo crear estas y otras reglas de alerta recomendadas, consulte Creación de alertas para el grupo de SQL dedicado de Synapse.

Recomendaciones de Advisor

Para algunos servicios, si se producen condiciones críticas o cambios inminentes durante las operaciones de recursos, se muestra una alerta en la página Información general del servicio del portal. Puede encontrar más información y correcciones recomendadas para la alerta en Recomendaciones de Advisor en Supervisión en el menú izquierdo. Durante las operaciones normales, no se muestran recomendaciones de Advisor.

Para más información sobre Azure Advisor, consulte Introducción a Azure Advisor.

El grupo de SQL dedicado de Synapse Analytics proporciona recomendaciones de Azure Advisor para asegurarse de que la carga de trabajo del almacenamiento de datos está optimizada de forma coherente para el rendimiento. Para más información, consulte Recomendaciones de Azure Advisor para un grupo de SQL dedicado en Azure Synapse Analytics.

Contenido relacionado