Información general sobre la supervisión de Apache Spark

La supervisión de Spark en Microsoft Fabric está diseñada para ofrecer una experiencia basada en interfaz de usuario web con funcionalidades enriquecidas integradas para supervisar el progreso y el estado de las aplicaciones Spark en curso, examinar las actividades anteriores de Spark, analizar y optimizar el rendimiento, y facilitar la solución de problemas de errores. Hay varios puntos de entrada disponibles para examinar, supervisar y ver los detalles de la aplicación Spark.

Centro de supervisión

El centro de supervisión actúa como un portal centralizado para examinar las actividades de Spark entre elementos. De un vistazo, puede ver las aplicaciones Spark en curso desencadenadas desde cuadernos, definiciones de trabajos de Spark y canalizaciones. También puede buscar y filtrar aplicaciones Spark en función de diferentes criterios y explorar en profundidad para ver más detalles de ejecución de Spark de aplicaciones Spark.

Ejecuciones recientes de elementos

Cuando se trabaja en elementos específicos, la característica Ejecuciones recientes del elemento permite examinar las actividades actuales y recientes del elemento, además de obtener información sobre el remitente, el estado, la duración y otra información de las actividades enviadas por usted u otros usuarios.

Supervisión contextual de Notebook

La supervisión contextual de Notebook ofrece las funcionalidades de creación, supervisión y depuración de trabajos de Spark en un solo lugar. Es posible supervisar el progreso del trabajo de Spark, ver las tareas y ejecutores de Spark y acceder a los registros de Spark dentro de un cuaderno a nivel de celda de Notebook. El asesor de Spark también está integrado en Notebook para ofrecer asesoramiento en tiempo real sobre la ejecución de Spark de código y celdas, además de realizar análisis de errores.

Supervisión insertada de la definición de trabajos de Spark

La característica Supervisión insertada de definición de trabajo de Spark permite ver el envío y el estado de la ejecución de la definición del trabajo de Spark en tiempo real, así como ver las últimas ejecuciones y configuraciones de la definición de trabajos de Spark. Puede ir a la página de detalles de la aplicación Spark para ver más detalles.

Supervisión insertada de la actividad de Spark de canalización

En el caso de la supervisión insertada de la actividad de Spark de canalización, los vínculos profundos se han integrado en las actividades de definición de trabajos de Notebook y Spark dentro de la canalización. Es posible ver los detalles de ejecución de aplicaciones Spark, la instantánea de definición de trabajo de Spark y notebook correspondientes, además de acceder a los registros de Spark para solucionar problemas. Si se produjese un error en las actividades de Spark, el mensaje de error en línea también estará disponible en las actividades de Spark de canalización.

Contenido relacionado

• Asesor de Apache Spark para obtener consejos en tiempo real sobre cuadernos
• Examinar las aplicaciones de Apache Spark en el centro de supervisión de Fabric
• Examinar las ejecuciones recientes del elemento
• Supervisión de trabajos de Spark en un cuaderno
• Supervise la definición del trabajo de Apache Spark
• Supervisión detallada de aplicaciones Apache Spark
• Uso del servidor de historial de Apache Spark extendido para depurar y diagnosticar aplicaciones Spark
• Supervisión del consumo de capacidad de Spark