Supervise la definición del trabajo de Apache Spark

Con la supervisión insertada del elemento de definición de trabajo de Spark, puede realizar un seguimiento de lo siguiente:

  • Supervise el progreso y el estado de una definición de trabajo de Spark en ejecución.
  • Vea el estado y la duración de las ejecuciones anteriores de la definición del trabajo de Spark.

Puede obtener esta información desde el menú contextual Ejecuciones recientes en el área de trabajo o explorando las actividades de definición de trabajo de Spark en el centro de supervisión.

Supervisión insertada de la definición de trabajos de Spark

La característica de supervisión insertada de definición de trabajo de Spark permite ver el envío de la definición de trabajo de Spark y el estado de ejecución en tiempo real. También puede ver las ejecuciones y configuraciones anteriores de la definición de trabajo Spark y navegar a la página Detalle de la aplicación Spark para ver más detalles.

Screenshot showing the spark job definition inline monitoring.

Vista de elemento de definición de trabajo de Spark en el área de trabajo

Puede acceder a las ejecuciones de trabajo asociadas con elementos específicos de definición de trabajo de Spark utilizando el menú contextual Ejecución reciente en la página de inicio del área de trabajo.

Screenshot showing the spark job definition item view in workspace.

La definición de trabajo de Spark se ejecuta en el centro de supervisión

Para ver todas las aplicaciones de Spark relacionadas con una definición de trabajo de Spark, vaya al Centro de supervisión . Ordene o filtre la columna Tipo de elemento para ver todas las actividades de ejecución asociadas con las definiciones de trabajo de Spark.

Screenshot showing the spark job definition runs in Monitoring hub.

El siguiente paso después de ver los detalles de una aplicación de Apache Spark es ver el progreso del trabajo de Spark debajo de la celda Notebook. Puede hacer referencia a